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1 
基础 知识 


1.1 概率 


概率 论 的 一 个 基本 概念 是 随机 试验 :其 结果 在 事先 不 能 确定 
的 试验 .所 有 可 能 的 试验 结果 的 集合 称 为 试验 的 样本 空间 ,我 们 以 
S 表示 。 

一 个 事件 是 样本 空间 的 一 个 子 集 ,如 果 试 验 的 结果 是 该 子 集 
中 的 元 素 , 则 称 该 事件 发 生 。 假 设 对 样本 空间 S 的 每 一 个 事件 五 
定义 了 一 个 数 P(E) ,满足 以 下 三 条 公理 ”， 

公理 (1) 0 委 已 ( 瑟 ) 委 1]。 

公理 (2) 已 C9) 一 1 。 

公理 (3) 对 任何 一 列 互 不 相 容 的 事件 Ei, Es,…，, 即 Ej,E,= 


g，; 天 ) 人 是 空 集 )， 有 己 ( UE) = >)P(CE)。 我 们 称 已 (E) 为 事 


件 EE 的 概率 。 
公理 (1)、(2) 及 (3) 的 一 些 简单 推论 如 下 : 
1.1.1 如 果 ECF， 则 P(E)<<P(F)， 


* ) 事实 上 P(E) 只 对 5 的 所 谓 可 测 事件 有 定义 ,但 我 们 不 涉及 这 一 限制 。 


= ] 。 


1.1.2 P(E) 二 1 一 P(E)， 其 中 EE 是 五 的 余 集 。 
1.1.3 Pl UE)= PD PE), 当 E; 互 不 相 容 时 。 


11.4 P(UE)S DPE). 
不 等 式 (1.1. 4) 称 为 布尔 不 等 式 。 

概率 函数 书 的 一 个 重要 性 质 是 连续 性 。 为 了 更 精确 地 阐明 这 
一 性 质 , 需要 引进 极限 事件 的 概念 ， 其 定义 如 下 : 者 ECE 7 
之 1 , 称 事件 序列 {E,,n 之 1) 为 递增 的 ; 而 当 E 洋 Eiri, 7 之 1, 时 则 
称 为 递减 的 。 如 果 {E,,n 之 1) 是 一 递增 的 事件 序列 , 那么 我 们 定义 


一 个 新 的 事件 ， 记 为 im 匹 ,: 
limE,= UE 当 ECE,,i, 7 之] 
类 似 地 ， 如 果 { 五 ,1} 是 一 递减 序列 ， 那 么 定义 limE, 为 
limE,= (|E:， 当 EDE,t1, n>1 
现在 我 们 可 以 叙述 下 面 的 命题 : 
命题 1.1.1 
如 果 人 五 ,之 1} 是 递增 的 或 递减 的 事件 序列 ， 则 
limP(E,)=P( limE,) 
证 明 首先 假设 {E,,n 宇 1} 是 递增 序列 ， 并 定义 事件 ,，n 实 1， 为 
FI=E, 
F,=E,( UE) ‘=Ek, n>l 
即 FF 由 包含 在 到 中 但 不 在 任何 前 面 的 E: (过 xn) 中 的 点 组 成 。 容 易 验 
证 ,是 互 不 相交 的 事件 ， 满 足 
UF.=UE 和 F.= UE,, 对 一 切 "之 1 
于 是 
已 人 UE ) =P( UF,) 


~ SPp(F,) (出 公理 (3)) 


=1limP( UE,) 
=limP( E,) 
这 证 明了 (五 ,之 1)} 递 增 时 的 绪论。 
如 果 {E,,n 之 1} 是 递减 序列 ， 则 {Es,n 宇 1} 是 递增 序列 ， 因 此， 
Pl UE =limP( Es) 
但 因 UEE==( 介 E,)“， 可 见 
1—P( NE,) =lim [1-~ P(E,)] 
或 等 价 地 
P( UE,) —limP(E,) 
结果 得 证 。 
例 1.1(a) 考虑 一 个 群体 , 它 由 能 产生 同类 后 代 的 个 体 构 成 。 初始 的 
个 体 数 用 Xe 表示 ， 称 为 第 0 代 的 总 数 。 第 0 代 的 全 体 后 代 构 成 第 1 代 ， 其 
总 数 以 Xi 表示 。 一 般 地 ， 以 X, 表示 第 代 的 总 数 。 z 
由 于 X, 一 0 蕴含 Xt 一 0, 所 以 P(X, 一 0) 是 递增 的 , 故 limP( X,==0) 
存在 。 它 表示 什么 呢 ? 要 回答 这 个 问题 ， 运 用 命题 1.1.1 如下， 
limP{X,=0}=P{lim {X=—0}) 
=P{ U{X,=0)) 
二 PP( 群 体 述 早 灭 绝 ) 
即 第 =: 代 没 有 个 体 的 极限 概率 等 于 此 群体 最 终 灭 绝 的 概率 。 
命题 1. 1.1 还 能 用 来 证 明 波 莱 尔 一 坎 泰 利 引 理 。 
命题 1.1.2 波 莱 尔 一 坎 泰利 引 理 
设 El，E;,，… 为 一 列 事件 。 如 果 
DJ P(ED< 


一】 


污 
i 


P( 无 穷 多 个 E; 发生} 二 0 
证 明 无穷 多 个 无 发 生 ， 这 一 事件 记 作 limsupEk;， 它 可 表示 为 
limsupE, = NUE, 
因为 车 有 无 穷 多 个 E; 发 生 , 则 UE: 对 每 个 都 发 生 , 从 而 门 UE 发 生 。 另 
一 方面 , 如 果 门 UE; 发 生 , 则 对 每 个 %，U EE; 发 生 ， 从 而 对 每 个 至 少 有 一 
因 U EE.，n 之 1， 是 递 碱 的 事件 序列 ， 由 命题 1.1.1 得 


<lim >) P(E) 
一 0 
结论 得 证 。 
例 1.1Cb) 设 卫 ， 基 ,，,… 使 得 


P(X,=0)= 训 =1 一 P{X,=1)， xn 之 1 


如 果 记 二 ,二 {X, 一 0}， 则 因 2) ,P(E,) 二 >, 由 波 莱 尔 一 坎 泰 利 引 理 得 ， 
无 穷 多 个 X, 等 于 0 的 概率 为 0。 因此 对 充分 大 的 nx， X 必须 等 于 1， 从 而 我 
们 可 以 断定 以 概率 1 有 

lim X,=1 


天 一 和 


波 莱 尔 一 坎 泰利 引 理 的 逆 命题 要 有 独立 性 的 条 件 。 
命题 1. 1.3 波 莱 尔 一 坎 泰利 引 理 的 逆 命 题 
设 El， E;,， … 为 独立 事件 ， 使 得 


SI POE) = 
n= 1 


P1! 无 穷 多 个 E, 发 生 ) 一 1 


证 明 
P( 无 穷 多 个 ,发 生 | ==P {lim UE) 
=limP( UE:) 


=lim[1—P( NE:) _ 


现 因 
P(NE)= lp ce) 《由 独立 性 )》 
=- 外 [1 一 已 (五 ) 
过 中 -re 《由 不 等 式 1--z<er?) 


一 expl 一 > PE 


一 0， 因为 对 一 切 ” > PCE) 一 °° 


由 此 结论 得 证 。 
例 1.1(c) 设 X,X;,… 独 立 且 使 得 
P{X,=0}=1/n= 二 ] 一 P{X,=1;， 7 之 1 


车 记 E, 一 {X, 一 0} , 则 因 2 P(E,) 二 0, 由 命题 1.1.3, 无 穷 多 个 EE 发生. 也 


因 和 P(Es) 一 co, 也 有 无 穷 多 个 到 发 生 。 因此 以 概率 1 有 无 穷 多 个 X, 等 于 
0 及 无 穷 多 个 X, 等 于 1, 即 以 概率 1,n->co 时 ,X, 不 存在 极限 。 


1.2 随机 变量 


考虑 一 个 随机 试验 ， 其 样本 空间 为 S$。 一 个 随机 变量 X 是 一 
个 函数 , 它 给 5 中 的 每 一 个 结果 指定 一 个 实数 。 对 任何 实数 集 4， 
X 取 的 值 含 于 集 4 中 的 概率 等 于 试验 结果 包含 在 X-:(4) 中 的 概 
率 。 即 
PIXEA}=P(X (4)) 


其 中 XX (4) 是 由 一 切 满 足 XX(s)€E 4 的 点 sES 构成 的 事件 。 

随机 变量 X 的 分 布 函 数 严 由 下 式 定义 :对 任 一 实数 x 

F(r)=P{XE7rX}=—=P{XE(—00,7j) 
我 们 将 以 f(z) 记 1 一 f(x), 因而 
F(z)=P(X>zr} 

一 个 随机 变量 X 称 为 离散 的 , 如 果 它 可 能 取 的 值 的 集合 是 可 

数 的 。 对 于 离散 随机 变量 有 
F(zr)= > ,P(X=y} 


TAR 
一 个 随机 变量 称 为 连续 的 ， 如 果 存 在 一 函数 了 (x), 称 为 概率 
密度 函数 ， 使 


P{X 取 值 于 B} = [foraz 


对 每 一 个 集 B 成立。 因为 F(z) |”/(z)dz, 得 
f(z)= Fx) 
两 个 随机 变量 XX 与 了 的 联合 分 布 函数 严 定义 为 
F(zr,y)=P{X<zr, YYy) 
X 与 Y 的 分 布 函数 
Fx(r)=PIX<z}) 及 Fy(7x)=P{Y<x) 
可 以 由 f(z,y) 运 用 概率 运算 的 连续 性 求 得 。 具体 地 , 取 y,,n 宇 1， 
是 一 趋 于 oo 的 递增 数列 。 则 由 于 事件 {XX 三 +, 了 <y,} ,n >1, 是 递 
增 的 及 
7 limn(X<z,Y<y)=U {Xr,r<y,)— {Xz) 
由 连续 性 推 得 
limP{X<z,Y<y}=P{X<r) 


或 等 价 地 ， 
Fx(Cz) 一 limPCzyy) 


类 似 地 有 
如 果 对 一 切 工 与 > 有 
F(xr,y)=Fx(r)Fy(y) 
则 称 随机 变量 X 与 了 是 独立 的 。 
随机 变量 X 与 了 称 为 联合 连续 的 , 如 果 存在 函数 /(z,y), 称 
为 联合 概率 密度 函数 ， 使 下 式 对 一 切 集 4 与 8 成 立 : 


P(X 取 值 于 4,Y 取 值 于 B}=| | f(z,y)dydzx 


任意 一 组 随机 变量 XX,,X，,… ,六 的 联合 分 布 函 数 定义 为 
F(x 9 **" »T, ) ~ P(X ;六 ,二 二;， wii .a 
再 有 ， 如 果 下 式 成 立 
F(X 9 , To) = Px (XV Fx, (Za) Px, (XT,) 


其 中 


Fx (Zi 一 lim F(x 9""" , Tn) o 
Ti 


则 称 这 个 随机 变量 是 独立 的 。 


1.3 期 户 
随机 变量 X 的 期 户 或 均值 , 记 作 ECX) ,定义 为 
(1. 3.1) ECX) =| zdF Cz) 
| | | zf/(z)4dz， 当 久 是 连续 的 
>)zP{X=z}， 当 X 是 离散 的 
倘若 上 述 积分 存在 。 


(1. 3.1) 式 也 定义 了 X 的 任何 国 数 , 比如 ACX) 的 期 望 。 因 为 
A(X) 本 身 是 随机 变量 ,从 (1. 3.1) 得 


十 oo 
ELACX)]= | Fi(Cz) 


其 中 到 是 AX) 的 分 布 函数 。 然 而 ,可 以 证 明 它 等 于 
| AceaFcz)。 即 


十 oo 
(1. 3.2) ELRCX)] = | AceaFCz) 


上 式 有 时 被 称 为 不 自觉 的 统计 学 家 的 法 则 (因为 统计 学 家 一 直 被 
指责 为 用 了 (1. 3. 2) 式 但 不 明白 它 不 是 一 个 定义 )。 
随机 变量 X 的 方差 定义 为 
VarX 一 五 | (X— ELX 1):| 
=E[X’]—E[X]. 
两 个 随机 变量 X 与 Y 被 称 为 不 相关 的 , 若 它们 的 协 方差 
Cov(X,Y)=E[(X—E(C(X))(Y— EC(Y))| 
~E(XY)— E(X)E(Y) 
是 零 。 由 此 可 知 ,独立 随机 变量 是 不 相关 的 , 但 其 逆 不 真 (读者 应 
举 出 一 个 例子 )。 
期 望 的 一 个 重要 性 质 是 随机 变量 之 和 的 期 望 等 于 期 望 之 和 ; 


(1. 3. 3) E| >,X;|= 2 ELX,] 
z 一 ] z 一 】 
相应 的 方差 性 质 为 
(1. 3. 4) 
Var[ 1X, |— YYVarCX ) 十 2 >, >,Cov(CX,X)) 
一 1 i=1 | 


例 1.3(a) 匹配 问题 , 在 一 次 集会 上 , 2 个 人 把 他 们 的 帽子 放 到 房间 的 
中 央 混 合 在 一 起 , 而 后 每 个 人 随机 地 选取 一 顶 , 我 们 感 兴趣 的 是 拿 到 自己 的 
帽子 的 人 数 X 的 均值 与 方差 。 
为 了 求解 ， 我 们 利用 表示 式 
和 一 和 十 X 十 … 十 X， 


其 中 
_ 有 1， 如 果 第 :个 人 拿 到 自己 的 帽子 


xX, 
0， 其 它 


因为 第 i 个 人 是 等 可 能 地 选 到 有 顶 帽子 中 的 任何 一 顶 ， 所 以 得 PIX,= 
1 二 1/n， 从 而 


EC(X.)= 1/n 
VarCXD) 一 一 1 一 二 | = 
又 
Cov (Xi, KX))—ECXX,)— EC(X EC(X,) 
现在 由 于 
Xx 一 人 1， 若 第 ;个 人 与 第 /个 人 都 拿 到 自己 的 帽子 
0， 其 它 
得 
E(XX)=P{X:=1,X,=1)} 
=P{X;=1}P{X,;,=1/X,= 1)} 
11 
nn—l 
因此 ， 
名 
Cov XX) DR 
所 以 ， 由 (1. 3. 3) 与 (1. 3.4)， 
EL[X] 一 1 
及 
71 -一 :nn 
Var(X) = 本 2 去 二 站 =1 
于 是 匹配 数 的 均值 与 方差 都 是 1。( 关 于 这 些 结果 为 何不 邻 人 惊奇 的 解释 见 
例 1.5(Ce)。) 


例 1. 3(b) 某 些 概率 恒等式 ， Dl Al, A,, .'*，A, 记事 件 ， 定义 示 性 变 
量 忆 ， J 三 1， 2,， ,Nn 为 


令 


N= B33 


j=1 


则 六 表示 4;，1 专 jn， 中 发 生 的 事件 的 个 数 。 注 意 到 


1， 者 N==0 
(1. 3. 5) (1 一 1 六 一 
0， 著 六 >0 


就 能 得 到 一 个 有 用 的 恒等式 。 由 二 项 式 定理 


N 
80) aD*=2 [| 


-人 cm- sn 
因此 ， 如 果 我 们 记 


{1 若 NN>0 
0， 若 N=0 


则 (1. 3.5) 与 (1. 3. 6) 导 致 


或 
Lan Np 


usa necvis[[N) t+ eral (NY)] 
然而 
ELI]=P{N>0) 
一 已 (至 少 有 一 4; 发 生 ) 


=P{U4,)} 
且 
ELNJ=E| >1]= PPA) 
E| | > | |=EL4, 中 两 个 事件 同时 发 生 的 组 数 ] 
=E|[ 3 LT, | 
一 2 2 EE1.1)] 
一 般 地 ， 同 理 有 


On。 


El | MM |=a 个 事件 同时 发 生 的 组 数 ] 
-s[D DED] 


er 


| < 


-D5 Dp,A,) 


因此 ,(1. 3.8) 正 是 熟知 的 恒等式 
PLU4) = BPA)— BD) DI PAAD + 2) >) 2 PAA A 
一 二 (一 D"+1P(A1A2…A,) 
用 此 方法 也 可 导出 其 它 有 用 的 恒等式 。 例如 ,假设 我 们 想 求 事件 A1，,…， 
4, 中 怡 有 7 个 发 生 的 概率 的 公式 ,那么 定义 
7 (> 若 NN 二 r 


0， 其 它 
且 使 用 恒等式 
| | 《1 一 1 六 一 一 大 
或 
,MSI 

= 人 人) 

-> oD 
上 式 两 端 取 期 望 得 

st D0 ("el (| 

或 


(1.3.9)  P《{ 事 件 4，…，4。 中 恰 有 7 个 发 生 } 
< 7 十 地 
一 2 (—1) | 7 2 2 PA A jy,) 


i 


作为 (1. 3.9) 的 一 个 应 用 , 假设 m 个 球 随机 地 放 入 个 盒 中 ， 每 个 球 等 
可 能 地 进入 ”个 盒 中 的 任 一 个 ， 与 其 它 球 的 位 置 相互 独立 。 我 们 来 计算 恰 有 
~ 个 空 盒 的 概率 。 以 4; 记 第 i 个 盒子 是 空 的 这 一 事件 ， 从 (1. 3.9) 得 
。 11 。 


P 谷 有 + 个 空 全 器) 和 n (二)"” 


rz nn 


r 


因 和 起 2), ,< 由 | , ”| 项 组 成 而 和 式 中 每 一 项 都 等 于 指定 的 十 
个 盒子 是 空 的 概率 ， 故 得 上 式 。 


1. 4 矩 母 函数 、 特 征明 数 及 拉 普 所 斯 变换 


的 怎 母 极 数 定义 为 
g(t) =E[Le*] 


=|eraF lz) 


对 y 逐次 求 导 并 计算 在 1 二 0 点 的 值 能 得 到 X 的 各 阶 矩 , 即 
yp (4) = ELXer | 
J (t= EL Xe | 


y(t)= ELX"e™ |] 
计算 在 t=0 点 的 值得 
yg”"(0)= ELX”], 7 之] 
应 注意 我 们 已 假定 求 导 与 积分 运算 可 交换 是 合理 的 。 通 常 遇 到 的 
情形 都 是 这 样 的 。 
当 和 矩 母 函 数 存在 时 , 它 唯 一 地 决定 分 布 。 这 是 十 分 重要 的 , 因 
为 这 使 我 们 能 够 用 甜 母 聘 数 刻 划 随 机 变量 的 概率 分 布 。 
例 1.4(a) 设 X 与 Y 是 独立 的 正 态 随机 变量 ,各 自 的 均值 为 j 与 pw， 
方差 为 of 与 ， 它们 的 和 的 竹 母 函数 由 下 式 给 出 
px+r (t)= ELe' YX+Y)] 
一 Ele*]ELe* 《由 独立 性 ) 
= fx(t) py i) 
=exp{(pT po)t 二 + (oft+os)t /2)} 
其 中 最 后 的 等 式 来 自 表 1.4.2， 于 是 和 +Y 的 和 矩 母 消 数 是 均值 为 十 jo， 方 
差 为 of 十 0 的 正 态 随机 变量 的 抢 母 函数 。 由 唯一 性 ， 这 就 是 和 十 7 的 分 布 。 
。12 。 


表 1.4.1 


方差 


离散 概率 分 布 | 概率 质量 滔 数 4z) | 和 窍 母 函数 $(2) 


二 项 分 布 参数 
np,0Rpl 


均值 
ELpe: 十 (1 一 户 ) | nn 

pe: 1 

1— (1— pye’ p | 

1 | 

1 一 (01 一 5 ip 


泊 松 分 布 
参数 4 汪 0 


几何 分 布 
参数 0<p 志 1 


方差 
(a,b) 上 的 (bay? 
均匀 分 布 12 
指数 分 布 1 
参数 i 二 0 A2 
个 -分 布 参 数 四 
《2 AD) AD0 4 


正 态 分 布 
参数 (psa2) 


一 TCo 


cx 1x)! 


B- 分 布 ， 
0 过 Zz 达 ] a a 
参数 a,5， Pa 有 ab|(c 二 56)27(a 十 5 十 1) 
全 0 一 0 < 一 二 2 
“ FaJFCD) 


由 于 一 个 随机 变量 XX 的 矩 母 函 数 不 一 定 存在 , 故 理论 上 更 方 
便 的 是 定义 X 的 特征 函数 
。13 。 


gt) 一 巨 [ex]， 一 co<t<co 
其 中 ;一 V 一 1， 能 够 证 明 % 总 是 存在 的 ， 且 像 矩 母 函 数 一 样 唯一 
地 决定 X 的 分 布 。 
我 们 也 可 以 定义 随机 变量 了 ,，…，X, 的 联合 矩 母 函数 为 


pt t,) = Elexpt > 
或 联合 特征 函数 为 和 

pt se ts) —E[exp{i > zx 
可 以 证 明 联合 短 母 函数 ( 当 它 存在 时 ) 或 联合 特征 浮 数 唯一 地 决定 
联合 分 布 。 


在 处 理 只 取 非 负 值 的 随机 变量 时 ， 使 用 拉 普 拉 斯 变换 比 起 特 
征 熙 数 来 有 时 更 为 方便 。 分 布下 的 拉 普 拉 斯 变换 定义 为 
方 (5) 一 | se “dF(z) 
对 复数 ;二 a 十 汉 ， 其 中 a4 之 0, 这 个 积分 存在 。 正 如 特征 函数 一 样 ， 
拉 普 拉 斯 变换 唯一 决定 分 布 。 
我 们 也 可 以 对 任意 函数 定义 拉 普 拉 斯 变换 如 下 : 函数 g 的 拉 
普 拉 斯 变换 ， 记 作 饼 ， 定 义 为 
(5s) 一 | edg cz) 
倘若 此 积分 存在 。 能 证 明 镶 可 确定 gg， 只 相差 一 个 常数 。 


1.5 条 件 期 户 


如 果 关 与 了 是 离散 随机 变量 ,对 一 切 使 P{(7 三 y} 六 0 的 y, 定 
义 给 定 了 二 y 时 ， 的 条 件 概率 质量 函数 为 
P{X=zx,Y=y) 


PIX=7x|Y=y)= P{Y=y) 


给 定 7 一 y 时 ，X 的 条 件 分 布 定义 为 
。14 。 


F(x|y=P(X<zr|Y=y) 
而 给 定 了 二 y 时 ，X 的 条 件 期 望 为 
ELXIY = y= |zdF(z|y) = DzP(X = zlY=—) 
如 果 六 与 Y 有 联合 概率 密度 函数 f(x,y)， 则 对 一 切 使 
fy(y) 之 0 的 y， 给 定 了 二 y 时 ，X 的 条 件 概率 密度 师 数 定义 为 


_ f(x,y) 
f(x1y)= fy (ly) 


给 定 了 二 y 时 ，X 的 条 件 概 率 分 布 函数 为 
F(zly) = PIXS<zlY =y) =| f(rlydzr 
而 给 定 了 =y 时 ，X 的 条 件 期 望 此 时 定义 为 
E[X|IY©=y|= |zaF (zly) 一 |zAezlyaz 

所 以 除了 概率 现在 都 是 关于 事件 Y=y 的 条 件 概率 外 ， 一 切 
定义 均 与 无 条 件 的 情形 一 样 。 

我 们 以 E [XIY] 表示 随机 变量 Y 的 函数 , 它 在 Y=y 时 , 取 
值 为 ELX|Y==y]。 条 件 期 望 的 一 个 极其 有 用 的 性 质 是 对 一 切 随机 
变量 X 与 Y， 当 期 望 存在 时 ， 有 
01. 5.1) ELX] = ELELXIY]] = |ELXIY = yJdFyy) 

如 果 Y 是 一 个 离散 变量 ， 则 (1. 5. 1》 式 为 

E[X] = DE[X|IY = yJP{Y = y) 
而 如 果 Y 是 连续 的 ， 具 有 密度 fy) 时 , 则 (1. 5. 1) 式 为 
EL[X]= | ELX|Y = y]/ (dy 

现在 我 们 就 X 与 了 都 是 离散 随机 变量 的 情形 给 出 (1. 5. 1) 式 
的 证 明 。 

《1. 5.1) 在 王 与 了 是 离散 时 的 证 明 要 证 明 

E[X] = > E[XIY = yJP{Y = y) 


。15 。 


把 上 式 的 右边 写 为 
> ELXIY = yjP{Y = y} 


一 2 PlY = y} 


= -也 六 Ptx- z 了 一 y)} 
一 3 Sptx = = x,Y =y) 
一 Vp(X a 

~ E[X] 


结论 得 证 。 

从 (1.5.1) 式 我 们 看 到 ,EL[X] 是 给 定 Y 一 y 时 ,X 的 条 件 期 户 
的 一 个 加 权 平 均值 , 每 一 项 E [X|Y 一 y] 所 加 的 权 是 作为 条 件 的 
事件 的 概率 。 

例 1.5Ca) 随机 个 随机 变量 之 和 。 设 XI ，X，…， 为 一 列 独 立 同 分 布 
的 随机 变量 ; 设 入 为 一 非 负 整 值 随机 变量 ， 且 与 序列 世 ，X，…， 独 立 。 我 


们 首先 在 对 X 取 条 件 的 情况 下 来 计算 Y= 2 xX 的 矩 母 函 数 。 即 


N 


E[exp{t D>) Xi)|N = 四 
= Elexp{: 2) Xi}IN = 2] 


= Eexptt > YX}] (由 独立 性 ) 
= (px(t))” 
其 中 gx(t) 二 E[e*] 是 X 的 矩 母 函数 。 因 此 ， 


ELexp{: >)X,) LIN] = (Gx ON 
从 而 
br) 一 ELexp{i 2 Xi}] = EL CYx Ct))*] 
为 了 计算 Y= 2 xX 的 均值 与 方差 ， 我 们 对 Wy (2) 求 导 : 


。- 1]6* 


gr) 一 五 LNCOxGDD 六 -OoxG) | 
p02) ~— EL[NCN — I) (Gx) (px (2))? 
+ Npxl2))Y gx" (2)] 
计算 在 t=0 点 的 值 ， 得 
EC(Y) = ELNE(X)] = ELN JELX] 
及 
E[Y? 1 = EINCN — DE:[X] + NELX?]J 
= EL[N]JVar(X) + ELN’:]E?{X] 
因此 
Var(Y ) 一 E[Y?] 一 E:[Y]) 
一 下 LNJVar(X) + ELX Var(CN) 

例 1.5Cb) 一 名 矿工 陷 进 一 个 有 三 扇 门 的 矿井 中 。 第 一 扇 门 通 到 一 个 
隧道 ， 走 两 小 时 后 他 可 到 达 安 全 区 。 第 二 扇 门 通 到 又 一 个 洋 道 , 走 三 小 时 会 
使 他 回 到 这 矿井 中 。 第 三 扇 门 通 到 再 一 个 隧道 , 走 五 小 时 后 ， 也 会 使 他 回 到 
矿井 中 。 假定 这 矿工 总 是 等 可 能 地 在 三 肩 门 中 选择 一 扇 , 让 我 们 计算 矿工 到 
达 安 全 区 的 时 间 习 的 矩 母 函 数 。 

设 Y 表示 最 初 选择 的 门 。 那 么 
(1. 5. 2) Ele*|]= {ELe*|Y = 1]++ Ele*|Y = 2]+ Ele*|Y = 3]} 

现在 给 定 Y 二 1， 得 X=2， 因 而 

Ele*|lY=1|= e* 
又 给 定 了 =2， 得 X=3 十 X ， 其 中 和 是 回 到 矿井 后 再 找到 安全 区 所 附加 的 
时 间 。 但 一 旦 矿工 回 到 他 的 陷 井 , 问题 又 与 以 前 完全 相同 , 于 是 与 有 
相同 的 分 布 。 所 以 ， 
E[e*x|Y = 2 ] = ELe's+x*)] 
| = e¥E[e*] 

类 似 地 有 ， 

Ele”*lY = 3] = e¥E[e?] 
代 回 到 (1. 5. 2) 得 


五 Les | 一 - {ez 十 e¥Ele | 十 evFElLe™ |} 


1 
3 

或 

-17™* 


pz 


3— eo— e” 

先 对 一 个 适当 的 随机 变量 取 条 件 , 不 仅 使 我 们 能 求 得 期 望 ,也 
可 以 用 这 种 方法 计算 概率 。 为 明 盯 这 点 ， 以 上 记 一 个 任意 的 事件 
且 和 定义 示 性 随机 变量 X 为 
有， 如 果 发 生 
”lo， ”如 果 五 不 发 生 


Ele'”™ | 一 


XxX 


从 XX 的 定义 得 到 
E[X]=P(E) 
ELXIY==y]= 一 P(E]IY 二 y)， 对 任意 的 随机 变量 了 
所 以 ， 从 (1. 5.1) 式 我 们 得 到 
P(E) = |Pce 了 了 二 WaFyCy) 


例 1. se) 假定 X 与 Y 是 独立 随机 变量 , 各 自 的 分 布 为 下 与 C, 都 么 
和 二 Y 的 分 布 ， 记 为 xG， 称 为 与 G 的 卷 积 ， 由 下 式 给 出 
(xxC)(ae ) 一 PP(X 二 YY 和 ca 


十 ce 

= | PIX+Y<alY = ydG(y) 
十 oo 

=| P(X+y<alY = yjdcoy) 


二 56 
一 | F(a — y)dG(ly) 


我 们 以 Fs 记 卫 xF， 一 般 地 Fx 1 一 FF,。 于 是 F,， 即 玉 自 身 的 1 重 卷 积 ， 
是 n 个 独立 的 、 每 一 个 分 布 都 为 的 随机 变量 之 和 的 分 布 。 

例 1. 5(d) ”选票 问题 。 在 一 次 选举 中 , 候选 人 4 得 到 张 选票 而 候选 
人 8B 得 到 张 选票 ,其 中 nm， 假 定 选 票 的 一 切 排列 次 序 是 等 可 能 的 , 证 
明 ， 在 计 票 过 程 中 ，4 的 票数 始终 领先 的 概率 为 (4 一 m)/(n 十 m)。 

” 解 ” 以 Pm 记 所 要 求 的 概率 。 以 得 到 最 后 那 张 选票 的 候选 人 为 条 件 ,我 
们 有 


Pn 一 P(A4 始终 领先 14 得 到 最 后 一 票 } 二 


十 P{4 始终 领先 1B 得 到 最 后 一 票 } 二 


。18。 


现在 容易 看 出 ,在 4 得 最 后 一 票 的 条 件 下 ,A 始终 领先 的 概率 与 4 得 到 (x 一 
1) 票 而 B 得 到 m 张 聚 的 情形 要 算 的 概率 是 一 样 的 。 在 B 得 到 最 后 一 票 的 条 
件 下 ,可 得 类 似 的 结果 。 从 上 面 的 讨论 我 们 看 到 


(C1. 5.3) 大 ,> 一 iP —1, "aP 一 1 
现在 用 归纳 法 ,对 十 m 进行 归纳 ,能 够 证 明 
n—m 
《an = nn 二 +m 


当 n 十 m 王 1 时 显然 结论 为 真 , 即 Po 王 1。 假 定 十 mm 一 上 时 上 式 成 立 , 则 当 
?十 到 一 & 十 1 时 ,由 (1 5. 3) 与 归纳 假设 有 


nn nl1—m m 72 一 12 十 1 
i 

_n—m 

nn 二 m 


结论 得 证 。 
选票 问题 有 一 些 有 趣 的 应 用 .例如 ,考虑 连续 掷 一 枚 硬币 ,其 正面 出 现 的 

概率 总 是 p。 让 我 们 确定 开始 挪 币 之 后 正面 出 现 的 总 次 数 与 反面 出 现 的 总 次 

数 首次 相等 的 时 刻 的 概率 分 布 。 首次 相等 的 时 刻 为 2 的 概率 能 先 对 前 24 次 

试验 中 正面 出 现 的 次 数 取 条 件 而 得 到 ,这 就 有 

P1 首 次 相等 的 时 刻 二 2n} 


二 P{ 首 次 相等 的 时 刻 二 2n| 在 前 2n 次 中 正面 出 现 次 )| "| (1—p)" 


在 前 2 次 抛掷 中 出 现 ”次 正面 的 条 件 下 ， 易 知 ” 个 正面 与 z 个 反面 的 
一 切 可 能 的 排列 是 等 可 能 的 .于 是 上 面 的 条 件 概率 等 于 在 一 次 选举 中 两 候选 
人 各 得 ” 张 票 且 其 中 一 个 在 计 票 过 程 中 总 是 领先 直至 最 后 一 票 (这 一 票 才 使 
票数 相等 ) 的 概率 。 对 无 论 是 谁 得 到 最 后 一 票 取 条 件 , 这 正 是 选票 问题 中 在 
m 王 n 一 1 时 的 概率 。 因 此 


2n 
P{ 首 次 相等 的 次 数 一 2%} 一 P| ， p"(1—p)” 


2n 
| | p" (1l—p)” 
2n—1 
例 1.5Ce) 匹配 问题 ( 续 ). 计 我 们 再 考虑 例 1.3(a), 即 个 人 把 他 们 的 
帽子 混在 一 起 ,而 后 每 人 随机 地 选 一 项 ,我 们 要 计算 恰 有 上 上 个 匹配 的 概率 。 
昌 19 站 


先 以 玉 记 全 不 匹配 这 一 事件 及 P, 二 PCE), 使 得 明显 地 表明 它 依 赖 于 %。 
对 第 一 个 人 选 到 或 未 选 到 自己 的 帽子 一 一 记 这 两 个 事件 为 M 和 M' 一 一 取 
条 件 我 们 得 到 
P, = P(E) = P(E[M)PMA) + PCE IM PM') 
显然 ,PCE|M)= 二 0, 从 而 
(1. 5. 4) P=P(EIM) 2 一 


现在 已 (下 1M ?是 z 一 1 个 人 从 m1 顶 帽 子 中 各 取 一 顶 都 不 匹配 的 概率 ， 其 中 
有 一 个 人 的 帽子 不 在 这 * 一 1 顶 帽子 中 ,此 事件 以 两 种 互 不 相 容 的 方式 发 生 。 
一 种 是 都 不 匹配 且 多 余 的 那个 人 ( 即 其 帽子 已 给 第 一 个 人 取 走 的 那个 人 ) 未 
能 选中 多 余 的 帽子 ( 即 第 一 个 选取 的 人 的 帽子 ), 另 一 种 是 都 不 匹配 但 多 余 的 
人 选取 到 了 多 余 的 帽子 . 前 一 种 的 概率 是 P，;, 因为 可 以 将 多 余 的 帽子 看 作 
为 多 余 的 人 的 。 由 于 第 二 种 的 概率 是 | = |P，:， 我 们 有 
P(EIM) = P, ,+ 一 二 P,，_ 
于 是 ， 从 (1. 5. 4) 式 得 
P, = ep, + iP,, 


n 


或 等 价 地 
(1. 5. 5) P, 一 Pi 一 一 二 (Pi 一 P， 2) 
然而 ， 显 然 有 
一 1 
Pi 一 0， P= 


于 是 ， 从 (1. 5. 5) 式 得 


1 1 
i 
_ Ti—7?,_ 1 1 1 1 
PP = 4 4 或 P+ 
而 一 般 地 ， 有 
P= li1,.:1l1_ .+ <— 1 


为 了 得 到 恰 有 《个 匹配 的 概率 , 我 们 考虑 任意 固定 的 个 人 , 只 有 他 们 
选中 自己 的 帽子 的 概率 是 
。20 。 


(nO— k&) 


f 
了 . _1 .. 1 pp, 一 -P,_, 
$21 


n nNn—l] 到 一 (人 一 也 ) ! 
其 中 P,_: 是 其 余 n 一 个 人 从 他 们 自己 的 那些 帽子 中 选取 但 全 不 匹配 的 概 


率 。 因 个 人 的 选择 法 有 | ”| 种 ， 所 以 恰 有 个 匹配 的 概率 是 


i'n Cn 一 大) JI 1 1 (— 1)"* 
Wr 
当 充分 大 时 上 式 近 似 地 等 于 e-1/&1， 

所 以 当 充分 大 时 , 匹配 数 近似 地 具有 均值 为 1 的 泊 松 分 布 。 为 了 更 好 
地 理解 这 个 结果 , 我 们 回想 一 下 , 均值 为 4 的 泊 松 分 布 正 是 次 独立 试验 中 
成 功 次 数 的 极限 公布 ， 其 中 每 次 成 功 的 概率 为 p,， 当 n>oo 时 ， np, 一 4。 现 
在 如 果 我 们 设 
_ /1， ” 若 第 ; 个 人 选 到 自己 的 帽子 

0， ”其它 
则 匹配 数 7X; 可 以 认为 是 ”次 试验 中 成 功 的 次 数 ， 各 次 成 功 的 概率 为 工 。 


然而 上 述 结果 不 能 直接 运用 , 因为 这 些 试验 并 不 独立 。 但 这 里 相依 性 是 相当 
弱 的 ， 因 为 ， 例 如 
P{X;= 1} = 1/n 
PiX;= 1|Y)= 1}= 1/(n— 1), ji 
因此 我 们 肯定 会 希望 在 这 种 弱 相 依 关系 下 , 泊 松 极限 仍然 成 立 。 本 例 的 结果 
表明 确实 如 此 。 
例 1.5()〉 装填 问题 。 设 及 个 点 排列 在 直线 上 ， 且 设 随机 地 选取 一 
对 相 邻 的 点 ， 即 选取 (i, i 十 1) 的 概率 为 1/ (x 一 1), i 二 1,2，……,n 一 1。 我 
们 连续 地 随机 取 这 样 的 点 对 , 但 如 果 取 到 的 点 对 中 有 前 面 已 取 到 过 的 点 , 这 
一 对 就 去 掉 不 算 。 这样 一 直 取 到 只 留 下 孤立 点 为 止 。 我 们 关心 的 是 孤立 点 个 
数 的 平均 数 。 
例如 ， 若 ”一 8， 而 依次 出 现 的 随机 对 为 (2，3)，(7，8)，(3，4) 及 
《4，5)， 那 么 有 两 个 孤立 点 〈 (3，4) 这 对 去 掉 )， 如 图 1. 5. 1 所 示 ， 


学 


1 2 3 4 5 6 ?7 8 


“21 * 


若 我 们 令 


则 >77,,。 表 示 和 孤立 点 的 个 数 。 因 此 ， 


fi 一 1 


E[ 孤 立 点 的 个 数 ] 一 2 ELT.] 


一 2 Pe 
其 中 Pi 为 有 个 点 时 ，i 是 孤立 点 的 概率 。 令 
P,P,,, = Pin 


P, 是 端点 n (或 1) 成 孤立 点 的 概率 。 为 了 导出 Pi 的 表达 式 ， 可 以 认为 这 
个 点 由 两 个 独立 的 片断 组 成 ， 即 

1],，2; i 与 1，i 十 1，…，m。 
因为 点 :未 取 到 当 且 仅 当 第 一 段 的 右 端点 和 第 二 段 的 左 端点 都 未 取 到 , 所 以 
得 
(1. 5.6) Pi =: PiPnit1 
因此 如 果 我 们 能 计算 端点 未 取 到 的 概率 ， 则 Pi 可 确定 。 为 导出 P, 的 表达 
式 ， 以 初始 对 比如 说 (i，i 十 1)) 为 条 件 ， 且 注意 这 个 点 对 将 这 些 点 断 成 
两 个 独立 的 片断 一 1，2，…，i 一 1 及 : 填 2，…，m。 于 是 ， 如 果 初 始点 对 
是 G@ ,i 十 1)， 那 么 端点 4 是 孤立 点 ， 如 果 《一 i 一 1) 个 点 的 集合 的 疹 点 是 
孤立 点 。 因 此 有 
Pl P+ 二 +P 


人 之 一 一 1] 
或 

(n— DP,= Pi 二 +… 十 P,， 
用 n 一 1 代替 得 

(ma 一 2)P，; 一 忆 十 … P,.s 
将 两 式 相 减 得 

(n— 1)P,— (n— 2)P, 1= Ps 
或 


P, 一 Pi 一 一 一 (Pi 一 Pa) 


。02D 。 


P,—P 1 ] 
P; 一 卫 : 王 一 3 一 或 Ps = 1 
1 1 1 _1 
DP, P;=— 3 f 3 或 站 
一 般 地 ， 
1 1 (— 1 a (— 1) 
_ 一 ， 之 
PD 
于 是 ， 从 (1. 5. 6) 得 
#1 
了 下 - z 一 ] :7 
人 
一 0， zz 一 27 一 ] 
一 】 了 下 i 
人 _ 2<i<n—l 
二 J ! - 2! 
了 一 站 了 一 站 


对 大 的 i 与 4 一 i， 由 上 面 可 见 Psee-*， 且 事实 上 能 从 上 式 证 明之 /P,.。( 孤 
立 点 的 期 望 数 ) 渐 近 地 为 
Pin (十 2)e 2， 对 充分 大 的 

例 1.5(g) 可 人 靠 性 一 例 。 考 虑 一 个 有 ?个 部 件 的 系统 , 它 受到 随机 地 发 
生 的 冲击 ,假定 每 次 冲击 的 大 小 (用 一 个 数值 表示 ) 服 从 分 布 G， 与 其 它 的 冲 
击 值 相互 独立 。 若 发 生 一 次 值 为 z 的 冲击 , 则 冲击 到 达 时 , 正在 工作 的 各 部 
件 相 互 独立 地 以 概率 z 在 瞬时 间 失 效 * .我 们 关心 的 是 直到 全 体 部 件 都 失效 
所 必需 的 冲击 次 数 N 的 分 布 。 

为 计算 已 (N 盖 &)， MEi, t=1, 2, ***, nn,， 记 部 件 : 在 前 次 冲击 后 仍 
幸存 完好 这 一 事件 ， 则 

P{N>8}=P( UE) 


= P(E)— OPOEED + +1) TPE EE,) 
i—1 1< 


为 了 计算 此 概率 ， 以 pj 记 任意 一 次 冲击 后 ， 指 定 的 7 个 部 件 全 部 完好 的 概 
率 ， 以 冲击 值 为 条 件 得 


* ”由 概率 的 意义 ， 这 要 求 冲击 的 值 在 区 间 (0,1) 之 中 。 一 一 译 者 注 
-23 。 


pp, = |P{ 指 定 的 ;个 幸存 完好 | 冲击 值 是 =jdG(z) 


= |a — zx)idG(z) 


因为 
P(E.)= pi 
POEED) = pt, , POEE2E,)=— pt 
可 见 
n n 
PIN >>k}= np 一 ja 十 | 关中 十 … 十 (一 1)r+18p 
由 此 可 计算 入 的 均值 如 下 : 
E[N]= DP(IN>&h) 
下 一 0 
oo : 
= 2 | (一 D'tipt 
i 


和 
| 

be 
I 


一 


ii、 
一 


LL 


"| (一 1) > 
1 k=0 


fri(— 1)i+1 
Ee 


1\1t 


读者 应 注意 到 我 们 已 使 用 了 恒等式 ELN] = >)PIN > 如, 它 对 一 切 非 负 整 
值 随机 变量 N 成 立 ( 见 习题 1)。 


1.6 指数 分 布 、 无 记忆 性 及 失效 率 函 数 


一 个 连续 随机 变量 X 的 概率 密度 阴 数 若 为 
Ae™“*, TX 宇 0 
f(x) = | 
0， TX 二 0 
或 等 价 地 其 分 布 为 
ce 7, 工 之 0 


二 1 ~- 
F(x) = | Foody = 
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则 称 X 具有 参数 为 (之 0) 的 指数 分 布 。 
指数 分 布 的 甜 母 郴 数 为 
(1. 6.1) El[e”|= | aresar = 4 
现在 能 对 (1. 6. 1) 求 导 而 得 到 X 的 各 阶 矩 ， 我 们 留 给 读者 去 验证 
E[X] =1/X, Var(X) = 1/% 
指数 随机 变量 之 所 以 有 用 是 因为 它们 具有 无 记忆 性 ， 这 里 一 
个 随机 变量 X 称 为 无 记忆 的 ， 若 
(1.6.2)  P{X>s++itiX>1t}= PI{XO;s}, st>0 
如 果 我 们 把 X 看 作 某 仪器 的 寿命 , 那么 (1. 6. 2) 的 意思 是 在 仪器 
已 工作 了 zt 小 时 的 条 件 下 ， 它 至 少 工 作 * 十 上 小 时 的 概率 与 它 原来 
至 少 工作 * 小 时 的 概率 是 相同 的 。 换 句 话 说, 如 果 仪 器 在 时 刻 上 是 
完好 的 ， 则 它 的 剩余 寿命 的 分 布 就 是 原来 的 寿命 的 分 布 。 条 件 
(1. 6.2) 等 价 于 


Fls+#) = FCIFCU) 

因为 当下 是 指数 分 布 时 ， 上 式 成 立 ， 可 见 这 样 的 随机 变量 是 无 记 
忆 的 。 

例 1. 6(a) ”考虑 一 个 有 两 名 营业 员 的 邮局 。 假 设 当 4 进去 时 , 他 发 现 
一 名 营业 员 正 在 给 B 办 事 而 另 一 名 则 正在 为 C 服务 。 还 假设 已 告诉 4, 一 日 
B 或 C 离开 就 为 他 服务 。 如 果 一 个 办 事 员 为 一 个 顾客 所 花 的 时 间 服 从 均值 是 
1/4 的 指数 分 布 。 三 个 顾客 中 4 最 后 离开 邮局 的 概率 是 多 少 ? 

由 如 下 推理 可 得 解答 : 考虑 4 发 现 一 个 营业 员 有 空 的 时 刻 , 此 时 B 与 C 
中 有 一 个 刚好 离开 而 另 一 个 仍 在 接受 服务 . 然而 由 指数 分 布 的 无 记忆 性 , 这 
另 一 个 人 在 邮局 再 要 花费 的 时 间 也 服从 指数 分 布 ， 其 均值 仍 为 /4， 即 仿佛 
他 才 开始 服务 。 因 此 由 对 称 性 ， 他 在 4 之 前 结束 服务 的 概率 为 二 。 

例 1.6(b) 设 和 ，X:，… 为 独立 同 分 布 的 连续 随机 变量 , 具有 分 布下 。 
如 果 X, > max CXi,… ,XX,_1) ,4 之 0( 其 中 X= 一 oo), 则 说 在 时 刻 n 产生 一 
个 记录 , 其 值 为 X,， 也 就 是 每 次 产生 一 个 记录 , 就 达到 一 个 新 的 高 度 。 设 
表示 第 i 个 与 第 i 十 1 个 记录 之 间 的 时 间 ， 其 分 布 是 什么 ? 

作为 计算 = 的 分 布 的 第 一步 ， 我 们 注意 到 序列 X;，X,，… 与 F(X,)， 
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F(X2) ,… 的 记录 时 刻 是 一 样 的 , 且 因 F(X) 服从 (0,1) 上 的 均匀 分 布 ( 见 习题 
2) ,所 以 Ti 的 分 布 不 依赖 于 具体 的 分 布 所 只 需 它 是 连续 的 ) .因此 ,我 们 假定 
Ff 是 参数 4 一 1 的 指数 分 布 。 

为 计算 = 的 分 布 ,我 们 将 以 第 i 个 记录 值 R; 为 条 件 。 现 在 Ri 二 XX 是 参 
数 为 1 的 指数 变量 。 在 Rs 比 R! 大 的 条 件 下 ,R 有 参数 为 1 的 指数 分 布 。 由 
指数 变量 的 无 记忆 性 可 得 ,Ri 的 分 布 等 同 于 Ri 与 一 个 参数 为 1 的 独立 指数 
变量 之 和 的 分 布 。 因 此 R; 的 分 布 等 同 于 两 个 独立 的 参数 为 1 的 指数 变量 之 
和 的 分 布 。 由 同样 的 推理 可 知 R; 的 分 布 等 同 于 i 个 独立 的 参数 为 1 的 指数 
变量 之 和 的 分 布 。 但 众所周知 (见习 题 17) ,这 样 的 随机 变量 具有 参数 为 (i， 
了) 的 三 -分布 , 即 R; 的 密度 为 

JR CD) = 


(i ~ 1)1° {之 0 


因此 ,以 R; 为 条 件 得 
Pir >k) = | Plr> hlR = 1) (yd 
= a ete ide 
因为 当 第 : 个 记录 值 为 上 时 ,接着 的 & 个 值 都 不 是 记录 ,如 果 它 们 都 小 于 i, 由 
此 推 得 最 后 的 等 式 。 

不 但 指数 分 布 是 无 记忆 性 的 ,而 且 它 是 唯一 具有 这 个 性 质 的 
分 布 。 为 证 此 ,假设 XX 是 无 记忆 的 ,上 且 记 F(zx) 一己 (和 盖 了 ) , 则 
Fl(s+#t) = FG) FU) 

即 Cz) 满足 函数 方程 
8g(s++ it) = g(s)glt) 

然而 上 述 方程 满足 某 种 适当 的 条 件 ( 如 单调 性 , 右 或 左 连续 性 ,其 
至 可 测 性 ) 的 解 只 能 有 如 下 形式 

: g(X) =e 
4 是 某 个 适当 的 数值 。( 假 定 g 右 连续 时 , 一 个 简单 的 证 明 如 下 : 因 
g(s 二 tt) = g(s) g(t) ,得 g(2/n) = gl/n+1/n) = g:(1/n), 反 
复 推 知 g Cm/n) = g”(1/n), 又 g01) 一 g(1 十 1 十 … 二 1/n) 


z 之 1 


Ar 


* ) ”本 节 只 讨论 非 负 随机 变量 . 一 一 译 者 注 
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二 g”(1/n) 。 因 此 ,gCm/n) = [g(1)]*。 既然 z 右 连续 ,由 此 蕴含 
8g(7) = 二 [g(1) 了 FF。 因 g() = 二 g?(1/2) 宇 0, 得 到 g(xX) 二 e ,其 
中 4 二 一 log(g(1))。) 因 为 分 布 哆 数 总 是 右 连 续 的 ,所 以 必 有 
F(X)=e ” 

指数 变量 的 无 记忆 性 可 由 指数 分 布 的 失效 率 滑 数 ( 也 称 风 险 
率 男 数 ) 进 一 步 予 以 阐明 。 

考 感 一 个 连续 随机 变量 叉 , 它 有 分 布 范 数 尺 与 密度 晒 数 扩 失 
效 ( 或 风险 ) 率 函数 A(2) 定 义 为 


(CE 
(1. 6. 3) A(t) = FS 


为 了 阐明 4(2) 的 意义 ,把 XX 设想 为 某 种 元 件 的 寿命 , 量 假 定 
及 已 经 存活 上 小 时 ,我 们 要 求 再 过 时 间 di 它 失效 的 概率 , 即 考 虑 
P(X E€ (t,t dt)|X 放 >t} 。 现 在 


P{XE (t+d)|X>t) 一 一 


了 PP 人 EC 十 CD)》 
P{X>t} 
~ 7 (Wadt 
F(z#) 
~ A(t)at 
可 见 4(2) 表 示 一 个 t 岁 的 元 件 将 失效 的 概率 强度 。 
现在 假设 寿命 分 布 是 指数 分 布 , 那 么 由 无 记忆 性 ,一 个 上 岁 的 
元 件 的 剩余 寿命 的 分 布 与 一 个 新 元 件 的 寿命 分 布 相同 。 因 此 4(z) 
应 当 是 常数 。 这 从 下 式 可 得 证 
AP 一 


A(t) 一 一 二 一 人 
于 是 指数 分 布 的 失效 率 函 数 是 常数 。 参 数 4 常 称 为 分 布 的 速率 。 


(注意 速率 是 均值 的 倒数 ,反之 亦 然 。) 
失效 率 恩 数 A(z) 唯 一 决定 分 布 六。 为 证 明 此 事 ,我 们 注意 到 


2T 。 


积分 得 
logFCz) =— | MDdz + & 
或 
F()=e exp 1 一 | aa 
1 一 0 得 二 1, 因 而 
FU) = exp | 一 | oz] 
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1.7 极限 定理 


概率 论 中 的 一 些 最 重要 的 结果 是 以 极限 定理 的 形式 出 现 的 。 
两 条 最 重要 的 是 : 

强大 数 定律 

如 果 X1 ,XX,，,… 独 立 同 分 布 , 具 有 均值 x, 则 

P {lim CX, 十 … 十 XA,)/n 二 ji; 王 1 

中 心 极限 定理 

若 X,X，… 独 立 同 分 布 ,具有 均值 x 与 方差 v， 则 
和 十 …， 十 4 一 np 二。 

GATE 


如 果 我 们 令 S. 二 > )X ,其 中 X,,Xs,… 独 立 同 分 布 , 则 强大 


数 定律 说 S/n 以 概率 1 收 钙 于 ELXi;j; 而 中 心 极限 定理 说 当 
noo 时 ,S, 有 渐 近 正 态 分 布 。 


1.8 随机 过 程 


一 个 随机 过 程 X 一 {XC) ,iET) 是 一 族 随 机 变量 , 即 对 指标 集 
T 中 的 每 个 :,X(z) 是 一 个 随机 变量 ,我 们 常常 把 : 解释 成 时 间 , 且 
。D8 。 


a 1 z2 
limP | | 一 e zdrx 


2 人 


称 芯 ( 妃 是 过 程 在 时 刻 上 的 状态 。 如 果 指 标 集 工 是 一 个 可 数 集 , 则 
称 X 为 一 个 离散 时 间 的 随机 过 程 ,而 如 果 了 是 一 个 连续 统 , 则 称 
- 它 为 连续 时 间 过 程 。 
X 的 任 一 现实 称 为 一 条 样本 路 径 。 例 如 ,事件 随时 间 随 机 地 
发 生 ,而 和 (为 表 示 [0, 要 中 发 生 的 事件 个 数 , 则 图 1. 8. 1 给 出 X 的 
一 条 样本 路 径 , 它 对 应 于 在 时 刻 1 发 生 初始 事件 ,在 时 刻 3 发 生 第 
二 个 事件 , 而 在 时 刻 4 发 生 第 三 个 ,此 外 没有 事件 发 生 。 


1.8.1 和 (一 [0, 执 中 事件 的 个 数 的 一 条 样本 路 径 BZ ] 

连续 时 间 随 机 过 程 {(X(z),tET} 称 为 有 独立 增 量 ,车 对 一 切 

< 二 <<… 和 < 随机 变量 
从 (人 有) Oo XE XE) — KC), KR) — RE ) 

相互 独立 。 称 它 有 平稳 增 量 , 如 果 X(G 十 s) 一 X(t) 对 一 切 : 有 相 
同 的 分 布 .也 就 是 过 程 在 不 相 重 近 的 区 间 上 的 增 量 独立 时 ,过 程 有 
独立 增 量 ;而 过 程 在 任意 两 点 间 的 增 量 的 分 布 仅 依赖 于 该 两 点 间 
的 距离 时 , 过程 有 平稳 增 量 。 


] 题 


1 设 入 为 一 非 负 整 值 随机 变量 。 证 明 : 


E[N]= DPIN>k} = SPIN>h) 
是 一 1 此 一 :0 


。29 。 


ko 


un 全 


EA 


qq 


oo 


一 般 地 , 若 X 是 非 负 的 ,具有 分 布 忆 ,出 
E[X] = | Fon)ax 


及 


E[X"| 一 | zcraz 


. 设 世 是 一 连续 随机 变量 ,具有 分 布 严 ,证明 


(a) F(X) 服 从 (0,1) 上 的 均匀 分 布 ; 
(b) 如 果 U 是 (0,1) 上 均匀 分 布 的 变量 , 则 Ff (UVU) 有 人 分布, 其 中 
Fi(z) 是 满足 FC(y) = 二 的 y 值 。 


. 设 闵 , 为 具有 参数 (n,p,),n 之 1, 的 二 项 分 布 随 机 变量 ,如 果 当 nn 一 吕 时 ,np 


一 4 证明: 
P{X, =i}—>e NAN/i!, n> oo 
计算 具有 参数 n 及 p 的 二 项 分 布 随机 变量 的 均值 与 方差 。 
假定 进行 4 次 独立 试验 ,每 次 试验 的 结果 为 1,2,…,r 中 的 一 个 ,它们 出 现 


的 概率 分 别 为 pi,p2，*…,p,， 2 pi=1. 以 NN; 记 试 验 结 果 为 i 的 次 数 。 


(a) 计算 N1,… ,NN, 的 联合 分 布 。 它 称 为 多 项 分 布 。 
(b) 计算 Cov (Ni,N))， 
(c) 计算 未 出 现 的 结果 的 个 数 的 均值 与 方差 。 
设 Xi,X2,… 是 独立 同 分 布 的 连续 随机 变量 。 如 果 X, 之 max (Xi，…， 
X10) ,nn 之 0,XX, 三 一 00 ,我 们 说 在 时 刻 产生 一 个 记录 且 值 为 X,。 
(a) 以 NN, 记 到 (包括 ) 时 刻 n 为 止 产生 的 记录 的 个 数 , 计算 五 LN 及 
Var(N,)。 
(b) 令 T==min(n:n 之 1 且 在 时 刻 n 产生 一 个 记录 } 计算 已 (了 证 )} ,并 
证 明 P(T<co)=1 及 EFT]==o%，。 
(c) 以 了 , 记 第 一 个 大 于 y 的 记录 值 的 时 刻 , 即 
T, = min{(n:X, > y} 
证 明 :T, 与 Xz, 独立 , 即 值 首次 大 于 y 的 时 刻 与 该 值 独立 。( 如 果 你 反复 思 
考 最 后 这 个 命题 , 它 似乎 还 是 比较 直观 的 .) 


. 以 关 记 从 装 有 个 白 球 及 m 个 黑 球 的 钠 内 任 取 个 球 中 白 球 的 个 数 。 计 


算 ELX] 与 Var(X)。 


` 设 X 与 XX; 是 独立 的 泊 松 分 布 随 机 变量 ,均值 各 为 A 及 和。 


。 30 。 


(a) 求 X: 十 X 的 分 布 。 
Cb》 计算 在 XX 十 XX, 二 n 的 条 件 下 Xi 的 条 件 分 布 。 

9. 掷 一 枚 硬币 ,其 正面 出 现 的 概率 为 p, 连 续 地 投 毛 直到 一 连 出 现 了 r 个 正 

面 为 止 , 计 算 投 掷 次 数 的 期 望 。 

10. 一 钠 内 有 a 个 白 球 及 56 个 黑 球 ， 从 中 任 取 一 球 , 如 果 取 出 白 球 则 将 它 放 
回去 ;如 果 是 黑 球 , 则 从 另 一 钠 内 拿 一 白 球 蔡 换 它 放 回 去 。 在 重复 次 这 
样 的 作法 后 ,该 铅 内 白 球 数 的 期 望 记 为 M,。 
(a) 导出 递 推 公式 


M,,, = (1— zs) M+1 
(b》 利 用 (Ca) 证 明 
M,—=a+6—6(1— oii) 


(c) 第 tn 十 1) 次 取出 白 球 的 概率 是 多 少 ? 

11. 连续 的 随机 装填 问题 。 考 虑 区 间 (0,z) 且 假设 在 此 区 间 内 我 们 装填 随机 
单位 区 间 ( 它 们 的 左 端点 都 服从 (0,z 一 1) 于 的 均匀 分 布 ) 的 方法 如 下 。 设 
第 一 个 随机 区 间 是 五 。 若 页 ,，…,' 天 已 装 进 此 区 间 , 下 一 个 随机 单位 区 间 
如 果 与 区 间 7;,… ,Ti 都 不 相交 ,将 被 装填 进去 ,并 记 为 +1。 如果 它 与 1， 
… 中 之 任 一 相交 时 ,我 们 就 去 掉 它 ,再 查看 下 一 个 随机 区 间 。 这 种 作 
法 一 直 不 断 地 进行 到 没有 余地 再 装 进 一 个 单位 区 间 为 止 ( 即 已 装 进去 的 
区 间 之 间 的 间隔 全 部 小 于 1)。 令 NN(z) 表 示 在 [0,xj] 中 按 此 法 装 进去 的 
单位 区 间 的 个 数 。 
例如 ， 设 z= 二 5， 且 相继 的 随机 区 间 是 (0.5,1.5), (3.1,4.1),(4,5)， 
(1.7,2.7), 则 N(5)==3 且 装 法 如 图 1. 9.1 所 示 。 记 M(x) 一 EL[LN(zx)], 证 
明 :M 满足 


0.5 1.5 -1.7 2.7 3.1 4.1 
图 1.9.1 


M(xr) = 0,， Zz 二 1 
Tt—1 
Mr =| Mody+1, zr>1 


12. 设 Ui,VUs,… 是 独立 的 (0,1) 上 均匀 分 布 的 随机 变量 , 且 以 NN 记 满 足下 式 
。31 。 
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[nn 


的 n,n 宇 0, 之 最 小 值 
他 十 全 

IU e™*> [lv 其 中 [二 1 
i=1 


证 明 ;N 是 均值 为 * 的 泊 松 随机 变量 ,。( 提 示 : 按 x 归纳 ,并 对 Ui 取 条 件 
去 证 PIN 一 n} 一 eX/n1,) 
在 给 定 Y 的 条 件 下 ，X 的 条 件 方差 定义 为 

Var(X|Y) = E[(X — E[X|Y])?*/Y] 
证 明 条 件 方 差 公 式 ， 即 

Var(X) = Ef[Var(X|Y) | ++ Var(E[LX|Y |]) 

用 此 式 去 求 例 1.5 (b) 中 的 Var (X), 且 通 过 对 和 矩 母 函数 求 导 来 检验 你 
的 结果 。 
在 选票 问题 中 计算 4 在 计 票 过 程 中 不 曾 落 后 的 概率 。 
考虑 一 个 赌 徒 ， 他 在 每 次 赌局 中 分 别 以 概率 p 及 (1 一 p) 说 得 一 元 或 输 
掉 一 元 。 震 赠 徒 开始 有 半 元 ， 问 他 输 光 之 前 怡 好 赌 了 2 十 2: 局 的 概率 是 
多 少 ? 〈 提 示 : 利用 选票 定理 。) 
验证 指数 随机 变量 的 均值 与 方差 的 公式 。 
如 果 Xi，Xz，…，X, 是 独立 同 分 布 的 指数 变量 ， 参 数 为 4*。 证 明 : 


2x: 具有 参数 为 (x,，4) 的 大 -分 布 ， 即 证 明 ZX 的 密度 函数 为 

三 人) 一 Xe “A IC mo 1)!1!, tt 守 0 
在 例 1. 6 (a) 中 如 果 营 业 员 i 的 服务 时 间 是 参数 为 的 指数 变量 , i=1， 
2。 计 算 4 最 后 离 去 的 概率 。 
如 果冻 与 了 是 独立 指数 随机 变量 , 均值 分 别 为 1/A.,1/hs, 计算 Z 一 min 
《X，Y) 的 分 布 。 在 Z=X 的 条 件 下 ，2 的 条 件 分 布 是 什么 ? 
证 明 函 数 方 程 

g(s 十 2) = 8(5) + g(t) 

的 唯一 连续 解 是 g(s)==cs。 


. 对 于 任意 的 连续 分 布下 ， 导 出 第 ; 个 记录 值 的 分 布 ( 见 例 1. 6(b))。 
22. 


车 Xi 与 XX 是 独立 的 非 负 连 续 随 机 变量 ， 证 明 : 
P{X! < X,|Imin(X,,X,) 一 上 一 


其 中 丸 () 是 X; 的 失效 率 函 数 . 
。39 。 
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2 
泊 松 过 程 


2. 1 泪 松 过 程 


随机 过 程 IN (2) ,t 宇 0} 称 为 一 个 计数 过 程 ， 若 NN(1) 表示 到 
时 刻 : 为止 已 发 生 的 “事件 ”的 总 数 , 因此 一 个 计数 过 程 N (必须 
满足 : 

(i) 和 NG) 之 0， 

(i) NGC) 是 整数 值 ， 

(iii) 车 5 三 :， 则 NN (Cs) 三 N04)， 

(iv) 当 s 过 i 时 ,NGQ) 一 NGC;) 等 于 区 间 《s,t| 中 发 生 的 事件 的 个 
数 。 

如 果 在 不 相交 的 时 间 区 间 中 发 生 的 事件 个 数 是 独立 的 ， 则 称 
计数 过 程 有 独立 增 量 。 例 如, 这 意味 着 到 时 刻 z 已 发 生 的 事件 个 数 
( 即 和 NC)) 必 须 独 立 于 时 刻 t 与 1 十 s 之 间 所 发 生 的 事件 数 ( 即 
NG 二 Ts)—N())., 

夺 在 任 一 时 间 区 间 中 发 生 的 事件 个 数 的 分 布 只 依赖 于 时 间 区 
间 的 长 度 , 则 称 计数 过 程 有 平稳 增 量 。 换 言 之 , 若 对 一 切 志 <ta 及 
5 盖 0 ,在 区 间 ( 人 十 十 ?中 事件 的 个 数 ( 即 N Ga 十) 一 NG 十 5)) 
与 区 间 (z ,tsj 中 事件 的 个 数 ( 即 入 Gz.) 一 N (zt)) 有 相同 的 分 布 ， 则 
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过 程 有 平稳 增 量 。 

泊 松 过 程 是 计数 过 程 的 最 重要 的 类 型 之 一 ， 其 定义 如 下 。 

定义 2.1.1 计数 过 程 {N GD， t 宇 0} 称 为 泊 松 过 程 , 具有 参 
数 4，4 二 0， 如 果 

(1) NGCO) 一 0， 

(Gii) 过 程 有 独立 增 量 ， 

Qii) 在 任 一 长 度 为 t 的 区 间 中 事件 的 个 数 服从 均值 为 飞 的 泊 
松 分 布 。 即 对 一 切 s，i 衬 0， 

x AL” 


P{N(t 二 Ts) — N(s) =n}=e ， 1 一 0,1,… 


nl 

注意 ,从 条 件 Qij) 可知 泊 松 过 程 有 平稳 增 量 是 ELN (2) ]== 家 ， 
这 正 是 称 4 为 此 过 程 的 速率 或 强度 的 原因 (单位 时 间 内 发 生 的 事 
件 的 平均 个 数 ) 。 

为 了 确定 一 个 任意 的 计数 过 程 实际 上 是 一 泊 松 过 程 ， 我 们 必 
须 证 明 它 满足 条 件 (il, ii) 及 (iii) 。 条 件 (Gi) 只 是 说 明 事 件 的 计数 是 
从 时 刻 t=0 开始 的 。 条 件 (ii) 通常 可 从 我 们 对 过 程 了 解 的 情况 去 
直接 验证 。 然 而 全 然 不 清楚 如 何 去 确 定 条 件 kiii) 是 否 满 足 。 为 此 
泪 松 过 程 的 一 个 等 价 定义 将 是 有 用 的 。 

作为 给 出 泊 松 过 程 的 第 二 个 定义 的 准备 ， 先 定义 一 个 函数 / 
是 oth) 的 概念 。 

定义 硅 


则 称 函数 是 o(h)。 
现在 我 们 能 给 出 泊 松 过 程 的 另 一 个 定义 。 
定义 2.1.2 计数 过 程 {NGQ), zt 之 0} 称 为 泊 松 过 程 , 参数 为 
4，A>0， 如 果 
(1) N(0)=0, 
(ii) 过 程 有 平稳 与 独立 增 量 ， 
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(iii) PING)=1}=Ah 二 +o(h), 
(N) PINGh) 之 2}=0(h), 
定理 2.1.3 定义 2.1.1 与 2.1.2 是 等 价 的 。 
证 明 ”首先 我 们 证 明定 义 2. 1.2 列 含 定义 2.1. 1。 为 此 设 
P(t) = PING) = n)} 
按 以 下 方法 导出 一 个 关于 Potz) 的 微分 方程 : 
Polt + hh) = PING+h) = 0) 
= PING) = ONG++hA)— NG) = 0) 
= P{N(G) = OP{NG + h)— NG) = 0)} 
二 PoQ)L1 一 个 十 o(h)] 
其 中 最 后 两 个 等 式 由 假定 (iiy) 与 (iii) 及 (iv) 列 含 了 PING) 一 0) 一 1 一 催 十 
op) 这 一 事实 而 得 到 。 因 此 


Pt 二 
令 h->0 得 
Po lt) 一 一 MP) 

或 

pty 
经 积分 得 

logP(t) 一 一 失 十 c 

或 

Polt) = Ke ” 
既然 P,(0) = PIN(0) 二 0} 一 1， 得 到 
(2.1.1) P(t)=—=e* 


类 似 地 ， 当 之 1 时 
Plt hh) = PING++h)S=n) 
= PING) =n,NG++h)— NG) = 0) 
+ P{NG) =a 1,NG+h)— NG)= 1)} 
二 PING 二 hh)=n,NG hh) NG) 之 2} 
然而 ， 由 Civ), 上 式 最 后 一 项 是 olh); 因而 ， 利 用 (i) 得 
Plt + h) = P(t)PoR) + P10)P (RR) + olh) 
。36。 


一 (] 一 谣 )P,(2) 十 兴 P,-1(t) 十 o(h) 


于 是 
Pret PD 一 一 MPG + AP) + 
令 A>0 
忆 C) =— AP,(t) + AP,1(t) 
或 等 价 地 ， 
e*[P (1) + aPC0)] = he*P, 1(t) 
因此 ， 
(2. 1. 2) (exP, lt)) = Ae*P,_1(t) 


现在 由 (2.1.1)， 当 二 1 时 我 们 有 
§ (esp1(t)) 二 A 
或 
P(t) = (Hoe” 
又 因 P1(0) 二 0, 得 
P(t) = Ne 


为 证 明 P,(2) 二 e*( 处 )*/n! ,我 们 用 数学 归纳 法 ,因此 先 假定 (x 一 1) 时 它 
成 立 。 由 (2. 1.2) 


dad ， ACM)"-I 
a Pr) i 
从 而 
CX)" 


e*P,(t) 一 -一 一 十 5 
?2 1 
因 P,(0)= 二 PIN(0) 二 n} 二 0, 得 


PC 一 ex (4 
nl 


于 是 定义 2. 1.2 蕴含 了 定义 2. 1. 1。 逆 命题 的 证 明 留 给 读者 去 作 。 


图 2.1.1 


* 37% 


注 记 入 (ft) 有 泊 松 分 布 这 个 结果 是 二 项 分 布 的 泊 松 逼近 的 
推论 。 为 明 上 腑 这 点 ， 把 区 间 [L0,ij 划 分 为 个 相等 的 部 分 ， 其 中 
非常 大 “图 2.1.1)。 首 先 注意 ， 在任 一 子 区 间 中 发 生 两 个 或 更 多 
个 事件 的 概率 当 A->ce 时 趋 于 0， 这 可 从 下 面 的 推导 得 知 。 

全 在 任 一 了 区 间 中 有 2 个 或 更 多 个 事件 } 


科 之 ,P{ 在 第 ; 个 子 区 间 中 有 2 个 或 更 多 个 事件 } 


= ko(t/k) 
o/b) 
ti/k 
一 0， 当 kk 一 oo 

因此 ,N 2 将 (以 趋 于 1 的 概率 ) 正好 等 于 有 一 个 事件 发 生 的 
子 区 间 的 个 数 。 然 而 由 于 有 平稳 独立 增 量 ， 此 个 数 有 参数 为 & 及 
PP 二 At/ 十 olt/8) 的 二 项 分 布 。 因 此 由 二 项 分 布 的 泊 松 台 近 得 知 ， 
令 & 趋 于 co，N (2) 将 有 泊 松 分 布 ,其 均值 为 


He 于 二 大 = 入 + mle 入] 一 


2.2 来 到 间隔 与 等 待 时 间 的 分 布 


考虑 一 泊 松 过 程 ， 以 X! 记 第 一 个 事件 来 到 的 时 刻 。 对 "之 1， 
以 X, 记 第 (n 一 1) 个 到 第 个 事件 之 间 的 时 间 。 序列 {X,,n 之 1) 称 
为 来 到 间隔 序 列 。 

现在 来 确定 X, 的 分 布 。 为 此 首先 注意 到 事件 {X, 之 ?发 生 当 
且 仅 当 泊 松 过 程 在 区 间 [o, 妇 内 没有 事件 发 生 ， 因 而 

P(Xi>t}=P{NG) 一 0) 一 ex 

因此 , X, 具有 均值 为 1/4 的 指数 分 布 。 求 已 知 X, 的 条 件 下 X 的 
分 布 。 然 而 

P{Xs 之 tiXi 二 s} = 了 {在 Gss 十 纪 内 没有 事件 |X = ;) 

= P{ 在 (s,s 十 志 内 没有 事件 } (由 独立 增 量 ) 
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二 e“ (由 平稳 增 量 ) 
所 以 ， 从 上 可 得 , X; 也 是 一 个 具有 均值 1/4 的 指数 随机 变量 ， 且 
X; 独立 于 X!。 重 复 同样 的 推导 得 下 列 命 题 。 
命题 2. 2. 1 
X。，7 一 1，2，…， 为 独立 同 分 布 的 均值 为 1/4 的 指数 随机 变 


-上 二 
有 申 。 


注 记 ”这 个 命题 不 应 使 我 们 惊奇 。 平 稳 独 立 增 量 的 假定 等 价 
于 说 在 概率 意义 上 过 程 在 任何 时 刻 都 重新 开始 ， 即 从 任何 时 刻 起 
过 程 独立 于 先前 已 发 生 的 一 切 (由 独立 增 量 ), 且 有 与 原 过 程 完 全 
一 样 的 分 布 ( 由 平稳 增 量 )。 换 言 之 ， 过 程 无 记忆 ， 因 此 指数 间隔 
是 预料 之 中 的 。 

为 一 个 感 兴趣 的 量 是 5S,， 第 个 事件 来 到 的 时 间 ， 也 称 为 第 
n 个 事件 的 等 待 时 间 。 因 


= Sx 7 之 1 


用 和 矩 母 函 数 容易 证 明 , 命题 2. 2. 1 蕴含 了 S, 有 参数 为 ” 与 4 的 六 
分 布 ， 即 其 概率 密度 为 
QD 


— 一 汪 
1 一 和 (2 一 1)1 


上 和 式 也 可 用 下 述 方式 导出 。 注 意 到 第 =” 个 事件 在 时 刻 上 或 之 前 发 
生 当 且 仪 当 到 时 间 i 已 发 生 的 事件 数目 至 少 是 wx， 即 
NGC) SO 5S,<i 


上 之 0 


因此 ， 
PIiS, tt} = PING)>n) 


= > 一 不 > 
对 上 式 求 导 ， 得 5, 的 密度 函数 是 


10 = 一 Dr + De 
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加 (A)! 
— (nO— 1)! 


命题 2. 2. 1 又 给 我 们 定义 泊 松 过 程 的 另 一 个 方法 。 我 们 从 一 
列 均值 为 1/4 的 独立 同 分 布 的 指数 随机 变量 (X;, 4 之 1} 出 发 。 现 
在 说 定 第 个 事件 在 时 刻 S 发 生 ， 这 里 
5, = Xi 十 X 十 … 十 XX 
这 样 就 定义 了 一 个 计数 过 程 , 旦 所 得 计数 过 程 {NWG) ,之 0} 就 是 参 
数 为 4 的 泊 松 过 程 。 


2.3 来 到 时 刻 的 条 件 分 布 


假设 已 知 到 时 间 上 泊 松 过 程 恰 发 生 了 一 个 事件 ， 我 们 要 确定 
这 一 事件 发 生 的 时 刻 的 分 布 。 因 为 泊 松 过 程 有 平稳 独立 增 量 ， 看 
来 有 理由 认为 L0,t] 内 长 度 相 等 的 区 间 包 含 这 个 事件 的 概率 应 该 
相同 。 换言之 , 这 个 事件 的 来 到 时 刻 应 在 [0, 如 上 均匀 分 布 。 容 
易 验 证 此 事 ， 因 为 对 s 全 + 有 
P{X, < NG = 1} = 一 下 


_ 卫 { 在 10,*) 内 有 1 个 事件 ,在 [s* ,tj 内 没有 事件 ) 
P{N(t) = 1) 


_ P 了 (在 [0,s) 内 有 1 个 事件 }P{ 在 [s ,tj] 内 没有 事件 } 
PING) = 1} 
Ase ~e 4s) 


Me—* 


可 以 推广 这 个 结果 ， 但 为 此 需 先 引进 顺序 统计 量 的 概念 。 

设 六 ，72，…，。 是 个 随机 变量 ， 如 果 Yw 是 Yl1, **Y,, 中 
的 第 & 个 最 小 值 ，& 王 1，2，…，7， 则 称 Yo， Yoo) **, Yo 是 对 
应 于 YY， Y,,， “**, Y, 的 顺序 统计 量 。 在 了， 1 一 1，2，…，71， 是 
独立 同 分 布 的 连续 随机 变量 ， 具 有 概率 密度 /， 则 顺序 统计 量 
YO), Yoo), **， Yo 的 联合 密度 为 
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f (yi19Y2 "Yn) 一 n!1 | [fCy),， yy 
i=1 


上 式 成 立 是 由 于 以 下 原因 ;GG) (Ys ，…，Yo) 将 等 于 (yi1，…， 
yr)， 如 果 (7 ，Y。，…,，Y,) 等 于 Gy，…，ys) 的 n! 个 排列 中 
的 任 一 个 ; (i) 当 Cy， yo， ， yi) 是 (2 ，…，2m) 的 一 个 排 
列 时 ，( 六 ，Y2，…，Y,) 等 于 yy ，yi,，…，Yi 的 概率 密度 是 f(y ) 


fly )= 1). 


fi 一 】 


若 Y,， i 二 1，2,，…，n， 都 在 (0,1) 上 均匀 分 布 ， 则 由 上 面 的 
讨论 可 知 ， 顺序 统计 量 Yu,, Y ec， ”9 Yo 的 联合 密度 晒 数 是 


1 
flyir sys) = 交 ， Oy 和 yy < 


现在 已 为 下 列 很 有 用 的 定理 作 好 了 准备 。 

定理 2.3.1 在 已 知 NG)=n 的 条 件 下 ,n 个 来 到 时 刻 Sd1， 
,5 写 相 应 于 个 (0,1) 上 均匀 分 布 的 独立 随机 变量 的 顺序 统计 
量 有 相同 的 分 布 。 

证 明 我们 来 计算 给 定 NG)=n 时 ,51,… ,5S, 的 条 件 密度 函数 , 设 
0<n<ts 过 之 tw 一 ty 且 取 有 充分 小 使 得 十 和 过 tip ,i 二 1,2,…,n。 现 在 
Piti SR 二 hi=s=1l,2, nNG)=n} 

_ PP{ 在 zt 十 有] 中 恰 有 一 个 事件 ,i 二 1,2,…,n, 在 [0,tj 的 别处 无 任何 事件 } 


PIN(G)— n)} 
MhjeT Wir Me Me MA hh 
ew* (AX)"/n! 
hh 
因此 
PSN Stith i 1 nNG) = rn) _ nl 
hbareeh, 


令 h;>0， 我们 得 到 S11，S;，…，S， 在 已 知 NGC) 一 2 的 条 件 下 的 条 件 密度 为 
Ge 一 守 ， 0<n< i 
证 毕 。 
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注 记 直观 地 ， 我 们 常 说 在 已 知 (0,， 旭 内 发 生 半 个 事件 的 条 
件 下 , 各 事件 发 生 的 时 刻 5;，…, S,, 看 作 不 排 顺序 的 随机 变量 ， 
是 相互 独立 的 且 服 从 (0,t) 上 的 均匀 分 布 。 

例 2.3(a) 假设 乘客 按照 参数 为 4 的 泊 松 过 程 来 到 一 个 火车 站 。 和 寿 火 
车 在 时 刻 :上 启程， 让 我 们 计算 在 (0,*? 内 到 达 的 乘客 的 等 待 时 间 的 总 和 的 期 
望 ， 即 求 BL 之 ，(t 一 S.) | ,其 中 5; 是 第 i 个 乘客 的 来 到 时 刻 。 对 N(1) 取 条 
件 得 

EL ZG SIING =n)= EL 2 5)ING) = 71] 


= nt 一 gE[ DSING) 一 | 
现在 以 Ui， Us，……,，U; 记 7 个 独立 的 (0,t) 上 均匀 分 布 的 随机 交 量 ， 则 


E[ Ps,ING) 一 n |= E[ DU] (由 定理 2. 3. 1) 


一 El 过 | 因 志 Oo 一 0 


因此 


NE) 
E20 一 SDINGOD = 加 = 卫 一 全 一 瑟 


a[ > 一 S) |= ELN()] 一 二 

作为 定理 2. 3.1 的 一 个 重要 应 用 ， 假 设 参数 为 ^ 的 泊 松 过 程 
的 各 个 事件 被 分 成 全 型 或 1- 型 的 , 且 假 设 一 个 事件 被 归 作 工 型 的 
概率 依赖 于 它 发 生 的 时 刻 。 具体 地 说 ,假设 一 事件 在 时 刻 * 发 生 ， 
以 概率 Pls) 被 归 作 二 型 ， 而 以 概率 1 一 Pls〉 归 作 王 型 ， 旦 与 其 
它 事 件 归 作 什么 类 型 相互 独立 。 利 用 定理 2. 3. 1 可 以 证 明 下 面 的 
命题 。 

命题 2. 3. 2 

奉 入 i(?) 表 示 到 时 刻 i,i- 型 事件 发 生 的 个 数 ,i 二 1,2, 则 N1C2) 
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与 Ni (Ci) 是 独立 的 沿 松 随机 变量 ， 分 别 有 均 值 p 及 和 (1 一 户 ). 
其 中 
p = | Pas 


证 明 对 NG) 取 条 件 ,; 我 们 计算 NiG) 与 N;() 的 联合 分 布 : 
P{NG) 一 PN = m) 
= > 已 (NiGD) 一 mVaG) = mING) = kh}P{NG) = k)} 


点 二 器 


~ P{NIG) =n,NG) = mING) =n+m}P{ING) 一 天 十 了) 
现在 考虑 在 区 间 L0,tj 中 发 生 的 任 一 事件 。 如 果 它 在 时 刻 s 发 生 , 则 它 是 二 型 
事件 的 概率 为 PCs)。 而 由 定理 2. 3.1 此 事件 发 生 的 时 刻 在 (0,t) 上 均匀 分 布 ， 
所 以 ， 它 是 一 个 二 型 事件 的 概率 为 


p= | PG)ds 
与 其 它 事件 为 什么 类 型 相互 独立 。 因 此 , P{NiG() 一 n,N2sG) 一 m|N(t) 一 n 十 


m} 刚 好 等 于 十 m 次 试验 中 次 成 功 m 次 失败 的 概率 ， 而 p 是 各 次 试验 成 
功 的 概率 ， 即 


PIN =n Ni =m|NGO=ntm} = "yp (1—p)” 
从 而 
CD 2 
tm 加 《1 一 轧 ) i mie 
op NP)” wap) (全 (1 一 Pp))” 
nl ml! 
证 毕 。 


上 述 命题 的 重要 性 可 由 下 例 来 说 明 。 

例 2. 3(b) 无穷 个 服务 员 的 泊 松 排队 系统 。 设 顾客 按照 参数 为 4 的 泊 
松 过 程 到 达 一 服务 站 .顾客 一 到 , 便 立 即 由 无 穷 个 服务 员 中 的 一 个 提供 服务 ， 
且 假 设 服 务 时 间 是 独立 的 ， 有 共同 的 分 布 C。 

为 计算 在 时 刻 上 服务 完毕 的 顾客 数 与 尚 在 服务 中 的 顾客 数 的 联合 分 布 ， 
我 们 称 一 顾客 为 I- 型 的 ， 到 时 刻 i 他 已 服务 完毕 ; 称 一 顾客 是 开 型 的 ， 他 在 
时 刻 : 尚未 服务 完毕 。 现 在 ， 如果 顾 客 在 时 刻 ;(s 志 t) 来 到 ， 那 么 当 他 的 服 
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务 时 间 小 于 :一 * 时 ， 他 是 型 的 ， 又 因 服 务 时 间 的 分 布 是 G， 这 个 概率 是 


GC 一 s)。, 因 此 
P(s) = GG—s), st 


于 是 从 命题 2. 3.2 得 到 ,Ni() (已 服务 完毕 的 顾客 数 ) 的 分 布 是 均值 为 
E[N(CO] = 4| GG — ds = 4 GWdy 
的 泊 松 分 布 。 类 似 地 NC(2) (时 刻 t 尚 在 服务 中 的 顾客 数 ) 有 泊 松 分 布 ,其 均值 为 
ELN,(t)] = | Gay 


县 Ai Go 与 Nat 独立 。 

于 例 进 一 步 说 明和 定理 2. 3. 1 的 应 用 。 

例 2.3(c) 假设 一 部 仪器 承受 到 冲击 ,冲击 遵循 参数 为 4 的 泊 松 过 程 来 
到 . 第 : 次 冲击 造成 损失 D;。 假 定 Di;,i 之 1 ,独立 同 分 布 且 与 {NGQ) ,之 0) 独 
立 ,; 入 (表示 [L0,tj 中 的 冲击 次 数 。 假 定 冲击 引起 的 损伤 随时 间 而 指数 地 衰 
减 ， 即 者 一 个 冲击 造成 的 初始 损伤 为 D， 时 间 上 之 后 它 造 成 的 损伤 则 是 
De “, a>0。 

吞 假定 损伤 是 可 加 的 ， 则 在 i 时 的 损伤 D(z) 可 表示 为 


N(t) 


DG) = ZPD "03 
其 中 3, 表示 第 ; 次 冲击 来 到 的 时 刻 。 我 们 能 求 得 ELDG) J 如 F: 


EC[D()ING) = 1] = s[ SD- “SING) = 7 | 
= E[ Dp- ING) = | 
1 一 1 
= ,ELDie-" S|NG) = n] 
ft 一 1 
= DELDING) = n]Ele-"-s)|ING) = 7] 
=] 本 
= EL[D] > JyELe-"*|N(G) — n] 
rr 二 1 
= ELDJE| Dye ING) = n | 
1 一 1 


一 E[D]e-“E[ > em IN(t) = n | 


ea 444。 


今 设 U1, 0;,…, U, 是 独立 同 分 布 的 L0,t:j 上 的 均匀 分 布 随机 变量 ， 则 由 害 
理 2.3.1 有 


a[ > |N() = |= E[ Pe © | 
= E[ 2] 


一 | erdz 
t J0 
一 (Ce — 1) 
因此 ， 


EfDCING)] = 4 — oe-«)EFD] 


取 期 望 得 


E[D(D] 一 守 生 2 


注 记 ”得 到 ELD(z)] 的 另 一 途径 是 将 区 间 (0,z) 分 成 长 为 有 
的 互 不 相交 的 区 间 ， 然 后 将 这 些 区 间 内 发 生 的 冲击 在 时 刻 t 造成 
的 后 果 全 加 。 更 确切 地 说 , 设 给 定 h， 且 定义 X; 是 区 间 1 二 (ih， 
十 Dh), i 一 0，1，*…，[t/h]， 内 来 到 的 一 切 冲 击 在 时 刻 i 的 损 
伤 之 和 ， 其 中 Laj 表 示 小 于 或 等 于 a 的 最 大 整数 。 我 们 有 表达 式 


(1 一 e 2 ) 


从 而 


[2/h] 


E[DG)] = > ELX] 
为 了 计算 ELX;]， 以 区 间 工 中 是 否 有 冲击 来 到 为 条 件 ， 可 得 


[zk] 


EL[D(Q)] = MELDe™ “一 0] 十 oCA)} 
其 中 工 是 区 间 I 中 神 击 来 到 的 时 刻 。 因此 ， 


[#75] 


G.3.D ELDWI = [DJ]E[ She we" ]+ | 大 | 


但 因 LiE1;， 令 h 一 0 可 得 
。45。 


Lz/#] ] 一 of 
Dhe ealt— L.) -| 。 一 全 (一 "dy 一 . 


于 是 在 (2. 3. ]) 中 今 h->0， 有 
人 


a 


E[D()] 一 (1 一 e-?) 


项 得 证 意 的 是 以 上 所 逮 正 是 以 下 推 斯 的 较为 严格 的 作 壕 因 
为 在 区 间 ( ,> 十 ay) 中 发 生 一 次 冲击 的 概率 为 4dy, 又 因为 它 的 损 
伤 在 时 刻 : 等 于 e“” 乘 以 它 的 初始 损伤 ,来 自 (y,y 十 dy) 的 冲击 
在 时 刻 上 的 平均 损伤 为 

AdyE|D je 一 7? 
从 而 
ELDG)] = AELD]| eay 


-全 -2| 《1 一 e “) 


2.3.1 MI|G|1 忙 期 

考虑 称 为 MIG11 的 排队 系统 , 其 中 顾客 按 参 数 为 4 的 泊 松 过 
程 来 到 。 到 达 时 ， 考 服务 员 有 空 就 接受 服务 ， 否 则 就 排队 。 相 继 
的 服务 时 间 古 独立 的 且 服 从 同一 分 布 C， 面 且 又 独立 于 来 到 的 过 
程 。 当 一 名 来 客 发 现 服务 员 有 空 时 ， 我 们 就 说 一 个 忙 期 开始 ， 在 
系统 中 不 再 有 顾客 时 它 结 束 .我们 要 计算 一 个 忙 期 的 长 度 的 分 布 。 

假 黄 一 个 忙 期 刚好 在 某 个 时 刻 开始 , 我 们 规定 这 个 时 刻 为 0， 
以 Si 记 又 来 到 个 顾客 的 时 刻 。( 于 是 , S; 服从 参数 为 ,4 的 三 - 
分 布 .)》 又 设 了 ，Y;,，… 为 服务 时 间 序 列 。 于 是 忙 期 持续 时 间 为 i 
且 由 次 服务 组 成 当 且 仅 当 : 

(GD Si 二 十 Yi ， kk 一 1]，2,，…,， nn 一 ]， 

GD Yi 十 … 十 Y= 二 zt， 

(iii) 在 (0,t) 内 有 一 1 个 顾客 来 到 。 
(是 必要 的 ， 因 为 如 果 5; 一 六 十 … 十 Y; 则 在 初始 顾客 之 后 来 到 
的 第 个 顾客 会 发 现 系 统 中 无 顾客 ， 从 而 在 第 & 十 1 次 服务 之 前 
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(于 是 在 第 ”次 服务 之 前 ) 忙 期 就 已 结束 了 .GD 和 (ab 的 推导 是 直 
接 了 当 的 ， 留 给 读者 完成 。 
直观 地 作 推 导 ( 把 密度 当 作 概率 )， 由 上 述 讨论 可 见 
(2. 3.2) PP{ 忙 期 长 为 1 上 且 由 次 服务 组 成 ; 
二 PP{Yi 十 … 十 Y=1, 在 (0,1) 内 nn 一 1 个 顾客 来 到 ， 
SY HY kl1,2,. ,An 1) 
一 P{Si 雪 中 十 … 十 一 1,2, ,一 1 在 (0,z 内 
n 一 1 个 顾客 来 到 ,六 十 … 十 Y= 二 t} XP{ 在 (0,2) 
内 ”一 1 个 顾客 来 到 ,六 十 … 十 Y ,二 z) 
因为 来 到 过 程 独 立 于 服务 时 间 ， 于 是 
(2.3.3) ”了 {在 (0; 四 内 nn 一 1 个 顾客 来 到 ,了 十 … 十 Y= 二 7 


AA) 
$ CT 


其 中 G 是 G 自身 的 2 次 卷 积 。 此 外 ， 以 定理 2. 3. 1 可 知 ， 在 (0， 
t) 内 有 一 1 个 顾客 来 到 的 条 件 下 ,依次 的 来 到 时 刻 如 同 "一 1 个 
独立 的 (0,t) 上 均匀 分 布 的 随机 变量 的 顺序 统计 量 。 利 用 这 个 事 
实 ， 连 辣 (2. 3. 3) 与 (2. 3.2) 得 
(2.3.4) ”PP 1{ 忙 期 长 为 1 且 由 次 服务 组 成 } 
* dG Ct) XP{la 人 Yt YY, 
k=1,2,* ,nn 一 1 | 六 十 … 十 Y, 二 t) 

其 中 71 ,TeT 与 (人 7， 2 ;了 ,} 独立 , 且 表 示 7 一 ] 个 (0,1) 上 均 
匀 分 布 随机 变量 的 顺序 统计 量 。 

为 计算 (2. 3. 4) 中 余下 的 概率 需要 一 些 引 理 。 引 理 2. 3. 3 是 初 
等 的 ， 其 证 明 留 作 一 个 习题 。 

引 理 2. 3. 3 

设 Y，Y,, …,，Y, 为 独立 同 分 布 的 非 负 随机 变量 ， 则 


E[Y, + + Yili + 二 Y= y] = ty, k=1,2,.,n 


-一 如 


引 理 2. 3. 4 
二 7 。 


设 ，r，…，m 为 区 个 独立 的 (0, 世 上 均匀 分 布 随机 变量 的 
顺序 统计 量 。 设 Y，Y;,， … 是 独立 同 分 布 的 非 负 随机 变量 且 独 立 
于 (rrz，…zj), 则 
(2.3.5) P (了 十 十 加 mr 一 1 2 和 127 十 … 十 了 一 y) 

用 一 3 0<<y<<t 
0 ， 其它 
证 明 ”用 归纳 法 证 。 当 n=1 时 ,我 们 必须 计算 当 在 (0,:) 上 均匀 分 
布 时 ,PY 过 ti|Y1 二 >} 之 值 。 但 是 
PIY <nlY= y= Py<n}=1— y/t, 0< y=t 
所 以 假定 引 理 对 一 1 成 立 , 考虑 的 情形 。 因 为 对 yy 之 t 结论 是 显然 成 立 , 所 
以 假设 y=i。 为 了 利用 归纳 假设 ,我 们 以 站 十 … 十 7,-1 及 5 的 值 为 条 件 来 计 
算 (2. 3.5) 的 左 端 , 且 利 用 下 述 结论 :在 元 ==w 的 条 件 下 ,tI,… ,nm 与 2 一 1 个 
(0,uw) 上 均匀 分 布 变 量 的 顺序 统计 量 同 分 布 (见习 题 13)。 按 此 做 法 ,对 ;二 y 
有 
(2.3.6) P {i+ 十 Yi k=1l, nD 十 … 十 Y ,1 二 $5， 
r=w si 十 … 十 Y ,一 y) 
/PY Yr =, nt 二 Y=s), y<u 
0， yu 
其 中 区,… ,tw 是 n 一 1 个 独立 的 (0,xz) 上 均匀 分 布 随机 变量 的 顺序 统计 量 。 
由 归纳 法 假设 可 见 (2. 3. 6) 的 右边 等 于 
1— ss/x, yu 
右边 一 人 i 
因此 ,对 y<xw， 
己 (十 十 了 一 1,2 7 十 … 十 了 ，， 
ty 二 Wy 十 十 Y= 二 yy} 


1 
Th 
从 而 ,对 y 二 uw， 
已 (和 十 十 了 < 一 12 一 二 二) 
Y …… 和 十 了 
=E[1— YY yy} 


一 — EY TY | 十 … 十 了 ,二 yj 


» A48* 


一 1 一 2 一 上 > 
n au 

这 里 我 们 利用 了 上 面 的 引 理 2. 3. 3, 再 次 取 期 望 得 
(2. 3.7) P {YY 十 -一 十 站 之 Tay 有 一 1 si 二 "十 YY 二 y} 
-本 号 :之 


Ta 


y<r, |P (yr! 


=Piy<r) tyE| 十 Bea 
而 的 分 布 为 
Plr, < 并 一 PimaxU; < 之 工 ) 
= PIU<Zzx,t=1,",n) 
= (rz/t)”, 0<r<t 
其 中 Ui;, i 一 1，…, n， 是 独立 的 (0,t) 上 均匀 分 布 变量 。 因 此 它 的 密度 为 


n—1 
fr) = ,0<zr<t 


于 是 
(2. 3.8) | 去 
tn 


从 (2.3. 7) 及 (2, 3. 8) 得 ，y<< 时 
PIT 二 十 YT,2, nlY) 二 … 十 Y= 二 yy} 
=1-| 守 | 一 了 
t 
=1— y/t 
证 毕 。 
在 回 到 忙 期 间 题 之 前 ， 我 们 还 需要 一 个 引 理 。 
引 理 2. 3.5 
设 Z19，“”， ro 为 2 一 ] 个 独立 的 (0, 刀 上 均匀 分 布 随机 变量 的 
顺序 统计 量 ， Y1, Y,, … 是 独立 同 分 布 的 非 负 的 随机 变量 ， 月 与 
{ris rt-1} 独立， 则 
PY 二 Yke=l,2 nl 二 Y,=t) 
1 


n 


证 明 为 计算 上 述 概率 ， 我 们 利用 引 理 2. 3. 4， 并 对 六 十 … 十 Y,-! 取 
名 49 日 


条 件 。 于 是 由 引 理 2. 3. 4， 
已 (人 ZN 十 入 十 了 共 二 下 一 1 一 1 十 十 Y 一 y， 
I 十 … 十 了 ,一 刁 
一 PiYj 十 … 十 Yi<r k=]， 一 1 Yi 十 十 Y 1 一 y} 
-| Oy<Lt 
“ 【! 0 ， 其 它 
因为 ， 吉 十 … 十 Yi1 志 六 十 … 十 Y,， 我 们 有 
P{Y 二 十 六 家 k=l 人 1) 
一 本 全 二 Yt Yt 


一 1] 一 2 一 ] 
ni 


结果 得 证 。 
现在 回 到 忙 期 长 度 与 受到 服务 的 顾客 数 的 联合 分 布 上 来 。 由 
(2. 3. 4)， 我 们 必须 计算 
P{t YYok=1 nO 1 二 Y=1) 
只 要 UU 是 (0,t) 上 的 均匀 分 布 随机 变量 , :一 U0 也 是 如 此 ， 从 而 亏 ， 
…，r 与 1 一 nr， …， 一 Fr 有 相同 的 联合 分 布 ， 因 此 将 全 部 
换 成 上 一 ze，1 委 4 生 2 一 1， 我 们 得 到 
Pi{teYlt 二 Yi ,k=1l en 一 1|Y 十 … 二 Y= 二 t+) 
=P{t—t i 二 TYk=1l, ,N17 二，… 二 YY, =t)} 
=P{t—T, St (Yi 二 十 Y) ,大 一 1 一 | 了 十 十 了 一 上 
一 已 4z 42Yin 二 十 Y=1 ,sn 一 1|Y 十 … 十 Y, 二 1} 
一 已 tr 4 之 Y, 十 … 十 了 一 1 一 1] 7) 十 … 十 了 一 缚 
其 中 最 后 的 等 式 成 立 是 因为 页, …，, 也 与 Y,，…,，Y, 有 相同 的 联 
合 分 布 9 从 而 有 关 诸 Y, 的 任何 概率 命题 用 YY, 换 Yi 了 1 换 Y;,,**,， 
Y.-t+1 换 Y,， ,YI 换 Y， 后 仍然 成 立 。 由 此 可 见 
玉 人 人 之 人 十 十 人 一 1 一 于 了 十 十 了 一 妇 
一 已 (有 之 卫 十 十 了 一 一 下 了 十 十 和 一 上 
=1/n (由 引 理 2. 3. 5) 
因此 ， 知 令 
。60 。 


《由 引 理 2. 3. 3) 


BCG2) = 二 PP{ 忙 期 的 长 三 zi, 忙 期 中 个 顾客 受到 服务 } 
则 从 (2. 3.4) 得 


Bl,n) 一 一 ee 站 


4G. (£) 


或 


_w 


Bsn) -| MU) Go cn) 
如 


入 期 长 度 的 分 布 ， 记 作 8() 二 SB， 由， 页 


on nO—1 
B() = > | e 2 dG, (1) 
mv 0 : 


2.4 非 齐 次 泊 松 过 程 


本 节 中 我 们 要 推广 泊 松 过 程 ， 允 许 时 刻 上 的 来 到 速率 (或 强 
度 ) 是 上 的 函数 。 

定义 2.4.1 计数 过 程 {N (2),t 宇 0} 称 为 非 平稳 或 非 齐 次 泊 
松 过 程 ， 有 强度 因数 4(t),t 宇 9， 如 果 

(GD No) 一 0， 

Gi) {NG),t 宇 0} 具 有 独立 增 量 ， 

Qi) 已 (ENG 二 AD) 一 NGD) 人 2) 一 o(A)， 

(iv) P{NG+HA—NG)=1}=AG)h+od), 
右 令 

mlt) = [acsyas 


则 可 证 明 
(2.4.1) PING+S)—NG)=n} 
=exp {(— ml(t+)—m 7) La 十 5) 一 zt)]" /ml ， 
7 之 0 
即 N(z 十 s) 一 N(t) 有 均值 为 mr 十 s) 一 m(z) 的 泊 松 分 布 。 
。51 。 


沿 着 定理 2. 1.1 的 证 明 路 线 , 稍 加 修改 可 得 (2. 4.1) 的 证 朋 : 

国定 1 且 定 义 
PCs)=—=P{NGTS)—NG)=n) 

则 有 
Psth)=P{N(G+s+h) —N(G)=0) 
二 PP( 在 (t,t 十 s] 中 没有 事件 ,在 (十 s,t 十 s 十 hj 中 没有 事件 ) 
二 P{ 在 (t,t 十 sj 中 没有 事件 }P{ 在 (十 ;,t 十 s 十 hj 中 没有 事件 } 
= Po(s) [1— ats) ho(n) ] 
其 中 最 后 第 二 个 等 式 由 公理 (i) 得 到 , 而 最 后 的 等 式 由 公理 (Gi) 与 
(liv) 得到。 因此 ， 


人 PC) 十 于 


h 
令 h=>0 得 

Po (s) 一 一 4 Gs) Po (3) 
或 

logPo (s) | (tu) du 
或 


Po (s) =e EGGT9 m0)] 

类 似 地 可 证 (2. 4.1) 的 其 余 结论 ， 将 它们 留 作 一 个 习题 。 

非 齐 次 泊 松 过 程 的 重要 性 在 于 不 再 要 求 平 稳 增 量 性 ， 从 而 允 
许 事件 在 某 些 时 刻 发 生 的 可 能 性 较 之 另 一 些 时 刻 来 得 大 。 

当 强 度 阻 数 4( 世 有 界 时 ， 可 以 将 非 齐 次 泊 松 过 程 看 作为 一 个 
齐 次 泊 松 过 程 的 随机 取样 。 具 体 地 说 ， 设 4 满足 

A(t) < 4， 对 一 切 上 之 0 

且 考 虑 一 个 强度 为 1 的 泊 松 过 程 。 设 此 过 程 在 时 刻 上 发 生 的 事件 


* “事实 上 ， 定 义 2.4. 1 中 的 四 个 条 件 尚 不 充足 ,应 补充 假设 AD 连续 及 lmFN 
(十 外 一 Nt 一 0) 一 1。 一 一 译 考 注 
业 D2 @ 


以 概率 4(2)/4 被 计数， 则 被 计数 的 事件 构成 的 过 程 是 有 强度 函数 
4(t) 的 非 齐 次 泊 松 过 程 。 容 易 从 定义 2. 4.1 得 到 此 结论 。 例 如 ， 
(0) ，(1)，(il) 成 立 ， 因为 对 齐 次 的 泪 松 过 程 它们 也 是 成 立 的 。 公 
理 (1v) 成 立 ， 因为 

P {在 (t,t 十 hj 中 有 一 个 被 计数 的 事件 } 


一 P{ 在 (zt 十 J] 中 有 一 个 事件 } “十 och) 


一 人 A oCh) 


二 A(2)h 二 To(h) 
把 非 齐 次 泊 松 过 程 作为 齐 次 泊 松 过 程 的 取样 的 解释 也 给 我 们 
提供 了 理解 命题 2. 3. 2 的 另 一 条 途径 (或 等 价 地 , 提供 了 证 明 命 题 
2.3.2 中 的 NO 服从 泊 松 分 布 的 另 一 条 途径 ) 。 


例 2.4(a) 记录 值 。 设 XI，Xs，… 是 一 列 独立 同 分 布 的 非 负 连续 随机 


变量 ,其 风险 率 函数 为 XD)( 即 Mt) 一 友 29， 其 中 三 与 己 分 别 是 区 的 密度 及 


分 布 图 数 )。 若 式 盖 max(XI ，…， 和 )， 其 中 Xo 三 0, 我 们 说 在 时 刻 n 产生 
了 一 个 记录 。 车 时 刻 # 产生 一 个 记录 ， 则 称 X, 是 一 个 记录 值 。 以 N (2) 记 小 
于 或 等 于 上 的 记录 值 的 个 数 ， 所 以 NG 是 一 计数 过 程 ， 其 中 若 z 是 一 个 记 
录 值 则 说 在 时 刻 z 一 个 事件 发 生 。 

我 们 说 {NG), zs 宇 0) 是 一 个 非 齐 次 的 泊 松 过 程 有 强度 函数 4(4)。 为 
验证 这 一 结论 , 注意 到 :与 1 十 h 之 间 有 一 个 记录 值 当 且 仅 当 值 超过 t 的 第 一 
个 X; 必 介 于 i 与 :十 h 之 间 。 但 由 风险 率 函 数 的 定义 , 我们 有 (对 XX; 是 哪 一 
个 变量 取 条 件 ， 比 如 说 i 一 n): 

P{X, €E (tt th)|X, > tt} = A oh) 
由 此 证 得 断言 。 

例 2.4(Cb) 无 穷 个 服务 员 的 泊 松 排队 系统 〈(M/G/ce) 的 输出 过 程 。 

实际 上 MV/G/ce 系 统 ( 即 有 无 穷 个 服务 员 ， 泊 松 来 到 及 共同 的 服务 时 间 
分 布 C 的 系统 ) 的 输出 过 程 是 强度 函数 为 4CG) 一 4G(G) 的 非 齐 次 治 松 过 程 。 为 

(1) 在 (Ms 二 中 离开 的 人 数 服从 均值 为 “Gy)dy 的 泊 松 分 布 ， 且 

(2) 在 不 相交 的 时 间 区 间 中 离开 的 人 数 是 独立 的 。 

。63 。 


为 证 (1), 称 在 区 间 (s,s 十 纺 内 离开 的 顾客 为 工 型 的 ， 则 在 时 刻 y 来 到 的 
顾客 属于 工 型 的 概率 是 


G(s 十 上 一 y) 一 CG 一 yy)， 当 y < 过 5s 
poe tr» 当 *<y<s 十 ! 
0， 当 y 访 ss 十 t 


因此 ， 从 命题 2. 3. 2 知 这 类 离 去 的 人 数 服 从 泊 松 分 布 ， 均 值 为 
:| POwWdy 一 4| GGs 十 上 一 yy) 一 CU 一 yy))dy 十 4 Ges 十 1 一 y)dy 


= c ydy 

为 证 明 (2), 设 卫 与 1; 为 不 相交 的 时 间 区 间 , 称 在 工 内 离开 者 为 一 个 1- 型 顾 
客 ， 称 在 1 内 离开 者 为 工 型 顾客 ， 其 余 的 称 为 开 - 型 的 。 又 从 命题 2. 3. 2 或 
更 确切 地 说 是 以 它 的 有 三 种 类 型 顾客 的 推广 得 知 ， 在 卫 与 1; 中 离 去 的 人 数 
( 即 本 型 与 型 左 客 的 人 数 ) 是 独立 的 泊 松 随机 变量 。 

利用 (1) 与 (2), 验证 输出 过 程 满足 非 齐 次 泊 松 过 程 的 全 部 公理 化 要 求 是 
件 简单 的 事 ( 它 很 像 泊 松 过 程 的 定义 2.1.1 六 含 定义 2.1.2 的 证 明 )。 

因为 上 一 ce 时 , 4(2) 一 4, 所 以 有 趣 的 是 注意 到 , 长 时 间 :( 当 1 一 吕 ) 之 后 ， 
极限 输出 过 程 是 强度 为 4 的 泊 松 过 程 。 


2.5 复合 泪 松 过 程 


称 随机 过 程 {X(#) zt0)} 为 复合 泊 松 过 程 ， 奋 对 之 0 它 可 以 
表示 为 : 


X(t) 一 yy 

其 中 {NGQ),t 宇 0} 是 一 泊 松 过 程 ，{Y;, :一 1，2，…} 是 一 族 独 立 同 
分 布 的 随机 变量 , 且 过 程 {NG),t 宇 0) 与 {Yi,1 宇 1) 假 定 是 独立 的 。 

下 面 是 复合 泊 松 过 程 的 一 个 例子 。 假 定 顾客 按 参 数 为 4 的 泊 
松 过 程 进 入 一 个 商店 ， 叉 假设 各 顾客 所 花 的 钱 数 形成 一 族 独 立 同 
分 布 的 随机 变量 。 那么 , 以 X( 记 到 时 间 t 顾客 们 在 此 商店 所 花 
费 的 总 值 ， 可 见 人 (4),t 宇 0} 是 一 个 复合 泊 松 过 程 。 

现在 计算 XGD) 的 矩 母 函 数 。 

站 D4. 


$,(u)=ELexp{uX()}] 


-VE FE[exp{uX@O}ING) =n]P{(NG)=n) 
证 一 站 


oe A Ei 
= PBLexp{u Yt tY ONG =n Je* te 
= A 
(2. 5.1) = ZE [exp {uC 六 十 … 十 Y,)} je A A 
(2. 5. 2) = 2 (ELexp{uY}]) re 


其 中 (2. 和 和 .} 与 NG) 的 独立 性 , 而 (2. 5. 2) 则 来 自 
诸 Y， 的 独立 性 。 因此 ， 令 
he = ELe" ] 
从 (2.5.2) 我 们 得 
由 = De * 


=exp{lAt($, (nu) — 1)} 


对 上 式 求 导 易 得 

(2. 5. 3) E[XG) |=AELY | 
及 

(2. 5. 4) Var[l XG) |=AELY?|] 


2.6 条 件 泊 松 过 程 


设 4 是 具有 分 布 G 的 正 值 随机 变量 , {NQ), zt 宇 0} 是 一 计数 
过 程 ， 使 得 在 已 知 4= 的 条 件 下 NG),t 宇 0} 是 参数 为 * 的 泊 松 
过 程 。 于 是 ， 例 如 有 


PIN NG) = 人 一 | er% Ce (NI) JG 


过 程 {N (2),t 之 0) 称 为 条 件 泊 松 过 程 ， 因为 在 训 4=4 的 条 件 
下 , 它 是 参数 为 4 的 泊 松 过 程 . 然而 , 应 该 指出 ,，(N(z), :全 0} 不 


e DD 。 


是 一 个 泊 松 过 程 。 例 如 ， 虽 然 它 有 平稳 增 量 ， 但 不 具有 独立 增 量 。 


(为 何不 ?) 
让 我 们 计算 在 已 知 Yo 一 对 的 条 件 下 4 的 条 件 分 布 。 对 很 小 
的 dA 


P{AE (a, Td ING) 一介 
PP{NG)=n|AE CQ,AHAA) PAGE (CA 十 CA)) 
P{NG)=n) 


2 一 “~ 一 ES dG(A) 


本 0 HF IGN 
从 而 在 已 知 NO 的 条 件 下 ,4 的 条 件 分 布 为 


| en* CradG) 
P{A<ZXING) =n} = OQ 
| e—*(A) dG) 

例 2.6(a) 假设 在 某 地 区 某 个 季节 中 地 震 发 生 的 平均 强度 不 是 就 是 
， 这 取决 于 一 些 暂 不 清楚 的 因素 。 还 假设 百 分 之 100p 的 年 份 强度 是 ,而 
其 余年 份 则 是 心 ， 这 种 情况 的 一 种 简单 模型 是 假设 {N (4)，0 志 1 二 吕 } 是 一 
条 件 泊 松 过 程 , 其 中 4 分 别 以 概率 p 与 1 一 p 等 于 多 与 ,已 知 在 一 个 季节 
起 先 的 上 时 间 内 发 生 ” 次 地 震 ， 则 这 是 一 个 办 季节 的 概率 为 

pe 1 CAt)” 
pe (At +e (Mt) (1 — p) 
再 对 4 二 家 或 4 二 取 条 件 ， 可 见 在 已 知 N()==n 的 条 件 下 ， 从 t 到 下 次 地 
震 的 时 间 有 分 布 
P {从 z 到 下 次 地 震 的 时 间 志 xz |N (4)==n) 


ple TM)e (ht 十 (1 一 ez)e (At)" 1—p) 
pe (CAt)" te (At) 1— pp) 


PIA=AING) = nn} = 


站 起 


1. 证 明 油 松 过 程 的 定义 2. 1. 1 蕴 合 定义 2. 1.2。 
2. 证 明定 义 2. 1.2 蕴含 定义 2.1.1 的 又 一 个 方法 : 
。56 。 


a) 利用 定义 2. 1. 2， 证 明 
Pl + ss) = Polt)Po(s) 

(b) 用 (a) 推 出 来 到 间隔 XX,， Xa，… 是 具有 参数 4 的 独立 指数 随机 变量 ， 
(c) 用 (b) 证 明 NN(2) 服 从 均值 为 飞 的 泊 松 分 布 。 
. 对 泊 松 过 程 证 明 ， 当 st 时 
P{N(Gs) = kIN() 一 人 -| "| | | 1 一 三 }” ， 

R 一 0，]1，……，7 
. 设 {N(),t 宇 0) 是 参数 为 4 的 泊 松 过 程 。 计 算 ECN(2)。，N(t 二 5)]。 


5， 假设 {Ni1GQ),t 实 0} 与 {Ns(t) ,1 这 0} 分 别 是 参数 为 1 与 1 的 独立 泊 松 过 


程 。 证 明 {Ni1(2) 十 N;(t),t 之 0} 是 参数 为 入 十 42 的 泊 松 过 程 ， 且 证 明 此 过 
程 的 第 一 个 事件 来 目 (Ni1(z#) 0) 的 概率 是 A1/ CA 十 42) ? 且 与 此 事件 发 
生 的 时 间 独 立 。 

. 一 部 机 器 运转 需要 两 类 部 件 。 我们 已 备 有 ? 个 1- 型 的 部 件 和 个 2- 型 的 
部 件 .:- 型 部 件 在 失效 之 前 持续 运转 的 时 间 是 参数 为 A 的 指数 变量 . 若 部 
件 失效 时 即 以 备件 中 取 一 同类 部 件 更 换 ， 求 机 器 正常 运转 时 间 的 平均 长 
度 , 即 求 ELmin( X,Y:) ]， 其 中 X: (Y,) 是 参数 为 内 (pe) 的 指 
数 变 量 。 

. 计算 5S1，S;，S; 的 联合 分 布 。 

. 产生 一 个 泊 松 随机 变量 。 设 Ui, U0:,… 是 独立 的 (0,1) 上 随机 变量 的 均 义 
分 布 。 

(a》 若 X; 二 (一 logUi)/4， 证 明 X; 服从 参数 为 4 的 指数 分 布 。 

(b) 若 定义 为 满足 下 式 之 nn 值 : 


nn 十 1 
[|U;=e > [|v 
i=1 i 二 1 


其 中 vw,=1, 利用 (a) 证 明 N 服从 均值 为 4 的 泊 松 分 布 , 试 与 第 一 
章 习 题 12 比较 。 
. 考虑 一 个 从 底层 起 动 上 升 的 电梯 。 以 N; 记 在 第 i 层 进入 电梯 的 人 数 。 候 
定 N; 相互 独立 , 且 N, 是 均值 为 的 泊 松 变量 。 在 第 ; 层 进入 的 各 个 人 相 
互 独立 地 以 概率 Pi 在 j 层 离开 电梯 ,2 P; = 1. 令 0 一 在 第 7 层 离开 电 
樟 的 人 数 ， 
(a) 计算 ELO,j。 
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10. 


ll. 


12. 


(b) Oj; 的 分 布 是 什么 ? 
(c) 0; 与 0; 的 联合 分 布 是 什么 ? 
考虑 一 个 具有 > 个 面 的 仙 子 , 且 假 定 每 撞 一 次 只 呈现 其 一 夯 , 第 : 面 以 概 
率 P; 出 现 ，》) P; = 1 。 给 定数 m，…n， 以 N; 记 直 到 第 ; 面 出 现 m 次 
时 所 需 掷 次 数 ，; 王 1，2，…，r。 令 
N = min N, 
于 是 N 是 对 某 个 i=1，2，…, r， 第 i 面 出 现 n 次 时 所 需 搓 次数。 
(a) Nj 的 分 布 是 什么 ? 
(b) 诸 和 N; 独立 吗 ? 
今 假 设 抛 搓 是 在 参数 为 \ 一 1 的 泊 松 过 程 所 产生 的 随机 来 到 时 刻 进 
行 的 。 以 7 了 ; 记 直 到 第 i 面 出 现 n; 次 时 所 需 时 间 , 1 二 1,，2, …， 了 7。 
今 T= _min 了 
《c) 全 的 分 布 是 什么 ? 
(d) 诸 T; 独立 吗 ? 
(le) 导出 E[T] 的 表达 式 。 
(》 用 (e) 导 出 ELN jj 的 表达 式 。 
设 要 做 的 试验 次 数 是 一 个 均值 为 4 的 泊 松 随机 变量 。 每 次 试验 有 个 可 


能 结果 ， 出现 第 i 个 结果 的 概率 为 P;， oP 二 1。 各 次 试验 相互 独立 以 


X; 记 恰 发 生 7 次 的 结果 的 个 数 ，7j 一 0，1，…。 计 算 ELX,j],Var(X,)。 
设 X，, Xi，…，X。 是 独立 的 有 共同 密度 函数 /的 连续 随机 变量 。 以 Xe 
记 闵 !，*…，XX, 的 第 i 个 最 小 者 。 
(a) 注意 到 为 使 Xe 恰好 等 于 z, 诸 关 中 的 i 一 1 个 须 小 于 z+， 有 一 个 必 
须 等 于 zx, 而 其 它 的 一 i 个 须 都 大 于 x。 利用 这 个 事实 来 论证 fx， 
的 密度 为 : 
nl 


f x, 《( 工 ) 一 Ga FC) Flr) f(z) 


《b) 多 忆 小 于 之 当 且 仅 当 有 多 少 个 XX 小 于 x? 
(c) 利用 (b) 求 P{Xosz} 的 表达 式 。 
(d) 利用 (a) 与 (c) 建 立 恒等式 : 对 0 委 ? 委 1， 


LA 业 好 一 上 __ >? nl i mi 


(e) 以 Si 记 泊 松 过 程 {NG(),t 宇 0} 的 第 i 个 事件 发 生 的 时 刻 。 求 
。 58。 


13. 


14. 


13. 


16. 


17. 


18. 
19. 
20. 
21. 


22. 


， 1 

， li>n 
以 Uo ,Uw 记 7 个 独立 的 (0,1) 上 的 均匀 分 布 的 随机 变量 的 济 序 统 
计量 。 证 明 : 在 已 知 芝 oo 一? 的 条 件 下 ， Ut, *, U6-y) 的 分 布 与 (nC— 
1) 个 独立 的 “0，y) 上 均匀 分 布 的 随机 变量 的 顺序 统计 量 的 分 布 相同 。 
载 有 顾客 的 客车 按 参 数 为 4 的 泊 松 过 程 来 到 一 有 无 穷 多 个 服务 员 的 排 
队 系 统 。 以 G 记 服 务 时 间 分 布 。 一 辆 客车 载 有 j 个 顾客 的 概率 为 aj， 
J 三 1，2，…。 以 六 ( 罗 记 到 t 时 已 被 服务 过 的 顾客 人 数 。 
(a) ELX() |=? 
(b) Xi 服从 泪 松 分 布 吗 ? 
假设 泊 松 过 程 的 每 个 事件 被 分 成 类 型 1, 2,…,&, 若 事 件 在 时 刻 * 发 生 ， 
则 它 与 其 它 事件 相互 独立 以 概率 P;(s) 划 归 为 i 型 ,i 二 1，2，…， 此， 


> Ps) = 1 .以 NiG) 记 在 [0, 要 内 i 型 事件 来 到 的 个 数 . 证明: N, Co) 


,i 一 1，2，…，&, 相 互 独立 , 且 NGz) 服从 均值 为 4| PGs)ds 的 泊 松 分 
布 ， 其 中 ,是 泊 松 过 程 的 参数 。 
个 体 按照 参数 为 4 的 泊 松 过 程 进 入 系统 。 每 个 来 到 的 个 体 相互 独立 地 经 
历 系统 的 状态 。 以 ai(s) 记 一 个 体 来 到 后 经 过 时 间 s 处 于 状态 i 的 概率 。 
以 六 (9 记 在 时 刻 t 处 于 状态 i 的 个 体 数 , 证 明 : N;(t) , i 宇 1, 相互 独立 
且 Ni;(t) 是 泊 松 变量 ， 均 值 等 于 

AE[ 一 个 体 从 进入 系统 到 i 时 止 处 于 状态 i 的 时 间 ]。 
假设 汽车 按 参数 为 4 的 泊 松 过 程 进 入 一 条 单 向 行驶 的 无 限 长 的 高 速 公 
路 ,进入 的 第 i 辆 车 以 速度 V; 行驶 。 假定 诸 V; 是 独立 的 正 随机 变量 , 有 
共同 分 布 f。 推导 出 在 时 刻 t 位 于 区 间 (a,5) 内 的 汽车 数 的 分 布 , 假定 一 
辆 车 超过 男 一 辆 车 时 ， 不 占用 任何 时 间 。 
计算 在 已 知 S,=: 的 条 件 下 Si!，-…，S; 的 条 件 分 布 。 
计算 例 2. 3(c) 中 DG) 的 矩 母 函数 。 
证 明 引 理 2. 3. 3 
对 非 齐 次 泊 松 过 程 完 成 NG 十 *) 一 NG) 是 均值 为 mG 十 s) 一 ms) 的 
泊 松 变量 的 证 明 。 
以 六 ，72，… 记 强度 函数 为 4 的 非 齐 次 泊 松 过 程 的 事件 的 来 到 间隔 。 
(a) 诸 T'; 独立 否 ? 
(b)〉 诸 Ti 同 分 布 吗 ? 
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23. 


24. 


25. 


26. 
27. 
28. 


《c) 求 T) 的 分 布 ; 
(d) 求 7 的 分 布 。 
考虑 一 非 齐 次 泊 松 过 程 {NG), it 宇 0}， 对 一 切 :， 其 4(:) 之 0。 令 
N’*() 一 Nm GG)) 
证 明 :，{N* (4)，z 之 0} 是 强度 4 二 1 的 泊 松 过 程 。 
(a) 设 {NGQ),t 之 0} 是 一 均值 函数 为 m(t) 的 非 齐 次 泊 松 过 程 ， 在 已 知 
NG 二 1 的 条 件 下 证 明 来 到 时 刻 不 讲 次 序 与 4 个 独立 同 分 布 函 数 


m(r) 


F(T) = | ndy)’ 
] ， Ti 


Tt 


的 随机 变量 有 相同 分 布 。 

(bb) 假设 工人 按照 均值 函数 为 代 ) 的 非 齐 次 泊 松 过 程 遭 到 事故 。 又 假 
设 每 个 受伤 者 停工 时 间 是 分 布 为 F 的 随机 变量 。 记 X() 为 时 刻 : 
停工 的 工人 数 。 计 算 ELXCGD)] 及 Var(X(D))》。 

一 个 二 维 泊 松 过 程 是 在 平面 上 随机 发 生 的 事件 构成 的 过 程 , 使 得 : (i) 对 

于 任 一 面积 为 4 的 区 域 , 其 中 的 事件 数 服从 均值 为 44 的 泊 松 分 布 ; (i) 

不 相交 的 区 域 中 的 事件 数 是 相互 独立 的 。 对 此 过 程 ， 考 虑 平面 上 任意 一 

点 ， 以 蕊 记 它 与 最 相近 的 事件 间 的 距离 《这 里 的 距离 即 通常 的 欧 几 里 德 

距离 )。 证 明 : 

(a) P{X>t)=e 


(b) E[X] =1/2M A 

对 复合 泊 松 过 程 计算 CovCX(s),X())。 

验证 (2. 5. 4) 式 与 (2. 5.3) 式 ， 

对 一 个 条 件 泊 松 过 程 : 

(a) 解释 为 什么 条 件 泊 松 过 程 有 平稳 增 量 但 无 独立 增 量 。 

(b) 在 已 知 (VCG),0 委 * 委 乡 ， 即 过 程 直到 上 时 的 历史 资料 条 件 下 ,， 计 
算 4 的 条 件 分 布 , 并 且 证 明 它 只 依赖 于 NG) .解释 为 什么 会 是 这 
样 的 。 

(c) 在 已 知 NG) =n 的 条 件 下 , 计算 上 之 后 第 一 个 事件 发 生 的 时 刻 的 条 
件 分 布 。 

(d) 计算 


2 


lim 
A— 0 


(e) 以 XI，Xs，… 记 来 到 间隔 。 它 们 独立 吗 ? 它们 同 分 布 吗 ? 


P{N(h) 之 1)} 
hh 


“” 00，。 


29. 考虑 一 个 条 件 泊 松 过 程 , 其 中 4 服从 参数 为 拉 与 的 三 分 布 , 即 密度 为 
g() 一 ae (Man i/(m—1)!, 0<A<o 


(a) 证 明 : 
mn—1l a 的 
PINC = 四 一 | n (a) (#4 ， 7 之 0 


(b》 证 明 : 在 已 知 NiG) 一 二 的 条 件 下 ,4 的 条 件 分 布 仍 是 工分 布 ， 参 
数 为 只 十 2，a 十 上 。 
(c ) limP{N(t 十 一 NG) = 1|ING) = 二 nn}/h 是 什么 ? 
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3 
更 新 理论 


3.1 引言 与 基本 定义 


上 一 章 我 们 看 到 泊 松 过 程 的 来 到 间隔 是 独立 同 分 布 的 指数 随 
机 变量 。 一 种 自然 的 推广 是 考虑 来 到 间隔 独立 同 分 布 ， 但 分 布 销 
数 任意 的 计数 过 程 。 这 样 的 计数 过 程 称 为 更 新 过 程 。 

正式 地 ， 设 {X,,n 二 1,2,…}) 是 一 列 非 负 的 随机 变量 ， 具 有 共 
同 的 分 布 ， 且 为 了 避免 显而易见 的 平凡 情形 ， 假设 (0) 王 
P(X 二 0)<z1。 我 们 将 把 X, 解释 为 第 "一 1 个 与 第 ”个 事件 之 间 
的 时 间 。 以 

4 = ELX,] = | zdF(z) 


记 相 继 发 生 的 两 事件 的 间隔 之 均值 ， 且 注意 到 从 假定 XX, 之 0 与 
(0) 过 1, 可 得 0 二 yo0。 令 


So 二 0， SS, 二 > x, 7 之] 
可 知 S, 是 第 个 事件 发 生 的 时 刻 。 因为 到 时 刻 + 已 发 生 的 事件 个 
数 等 于 使 第 个 事件 在 时 间 t 或 : 之 前 发 生 的 最 大 的 的 值 ,所 以 


到 时 刻 t 已 发 生 的 事件 的 个 数 入 (2) 为 
(3. 1. 1) NG = suptn: 5, St) 


* O22. 


定义 3.1.1 计数 过 程 {V GD) 尖 0} 称 为 更 新 过 程 ， 

我 们 将 通用 事件 与 更 新 这 两 个 词 ， 因 而 称 第 次 更 新 在 时 刻 
5» 发 生 。 由 于 间隔 是 独立 辣 分 布 的 ， 所 以 在 各 个 更 新 时 刻 此 过 程 
在 概率 意义 上 重新 开始 。 

我 们 将 要 回答 的 第 一 个 问题 是 在 有 限时 间 内 是 否 会 有 无 限 多 
”次 更 新 发 生 。 为 了 证 明 这 是 不 可 能 的 ， 我 们 注意 到 ， 由 强大 数 定 
律 可 知 ， 以 概率 1， 当 ”co 时 


Da > 
n 到 


但 因 wp 之 0， 所 以 这 意味 着 当 =” 趋 于 无 穷 时 ， 5; 必 将 趟 于 无 穷 。 于 
是 至 多 只 有 有 限 多 个 能 使 S$, 小 于 或 等 于 t, 因此 , 由 (3. 1. 1) 知 


N(t) 必 是 有 限 的 ， 所 以 可 写成 
NGC) ~ max{n : S, < 挟 上 ) 


3.2 NO 的 分 布 


A (2) 的 分 布 至 少 在 理论 上 能 得 到 , 只 要 先 注意 到 这 么 一 个 重 
要 的 关系 :到 时 刻 * 为 止 的 更 新 次 数 大 于 或 等 于 n 当 且 仅 当 在 : 之 
前 或 在 时 刻 i 发 生 第 ”次 更 新 ， 即 
(3. 2. 1) ND) 二 nn 全 5S, <t 
从 (3. 2.1) 得 到 
(3.2.2)  P{ING)=n}=P{NG) nr} —P{NG)Sn+1) 

一 已 (9 <) 一 已 (St) 

既然 随机 变量 X, ，; 郑 1， 是 独立 的 且 有 共同 的 分 布 函数 下 ， 所 以 


S$, 一 ZX 的 分 布 , 为 自身 的 n 次 卷 积 。 因而 , 从 (3. 2. 2) 我 
们 得 到 
PING) = n} = F(t) — F,,, (4) 
令 Mt) = E[NG) | 
。63。. 


称 m() 为 更 新 函数 ,更 新 理论 的 大 部 分 内 容 涉 及 到 确定 m(z) 的 
性 质 , m(z) 与 下 之 间 的 关系 由 下 列 命 题 给 出 。 


命题 3.2.1 
(3. 2. 3) mlt) = TVF， 
证 明 ~ 
Na) = Yl, 
其 中 加 


7 网 若 第 7 次 更 新 发 生 在 50, 引 内 
”lo, 其 它 
因此 ， 


EL[N()] = ET 7 
= 2 EL1,] 
一 Slip, 一 1} 


= SP(S, < 


天 二 1 


一 Sp.) 
其 中 由 于 7, 非 负 ， 求 期 望 与 求 和 顺序 交换 是 合理 的 。 
下 一 个 命题 证 明 NG) 有 有 限 的 期 望 值 。 
命题 3. 2.2 
对 一 切 0 科 4oo， MD)<co 
证 明 因 P(X.=0)<1， 由 概率 的 连续 性 可 知 存在 一 个 ac 之 0， 使 得 
P{X, 之 a} > 0 。 现 在 定义 一 个 关连 的 更 新 过 程 {X,,n 宇 1}) 如 下 : 
0， Xa 
fo, x 
日 令 NGC) =sup(f2a :和 十 … 十 X 委 名。 易 知 ， 对 此 过 程 更 新 只 能 在 时 刻 
一 ma 发 生 , 2 一 0，1，2，…， 且 在 这 些 时 刻 的 更 新 次 数 是 独立 的 几何 随机 庆 
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量 ， 其 均值 为 
1 
PIX, 之 a} 


于 是 


(t/a 二 1) 
P{X, 守 a} 


且 因 束 ,<X, 蕴含 着 NG) 三 NG) ， 所 以 结论 得 证 。 
注 记 以 上 的 证 明 还 表明 了 对 一 切 上 芝 0，r0， 严 LN ] 一 


< ce 


ELNG)| < 


3.3 者 干 极限 定理 


若 以 NN(>) 二 limN () 记 所 发 生 的 更 新 总 数 , 容易 看 到 以 概 
率 1， 
N(co) 一 co 
这 是 因为 使 所 发 生 的 更 新 总 数 N ce) 为 有 限 的 唯一 方法 是 有 一 
个 来 到 间隔 为 无 穷 大 。 所 以 
P{N(o0) 过 00} = 二 P{X, 二 00, 对 某 个 n) 
=P{U I{X, = co)) 


于 是 当 t 趋 于 无 穷 时 NG) 趋 于 无 穷 。 然而, 有 兴 超 的 是 了 解 
Ne) 趋 于 无 穷 的 速度 ， 即 我 们 要 能 说 出 一 些 关 于 lim 人 (9 的 情 
况 。 

作为 确定 NG) 增长 速率 的 准备 ， 让 我 们 先 考虑 随机 变量 
Svw 。 用 话 来 说 ， 这 随机 变量 表示 什么 呢 ? 我 们 以 具体 情形 作 归 
纳 , 例如 , 假设 NG) = 3, 则 Sw = S。 表示 第 三 个 事件 发 生 的 时 
刻 。 由 于 到 时 刻 * 为 止 已 发 生 的 事件 只 有 三 个 ,所 以 5; 也 表示 在 
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t 之 前 (或 在 时 刻 思 最 后 一 个 事件 发 生 的 时 刻 , 事实 上 这 就 是 ”we 
所 表示 的 : 在 时 刻 ; 之 前 或 在 时 刻 ; 最 后 一 次 更 新 的 时 刻 。 类 似 的 
推理 可 知 >wofi 表 示 时 刻 :; 之 后 第 一 次 更 新 的 时 刻 ( 见 图 3. 3. 1) 。 


x 
0 SN tt) ‘ SN (e+ 时 间 
图 3.3.1 
现在 我 们 可 以 证 明 下 列 
命题 3. 3. 1 以 概率 1， 当 1->co 时 
ND 1 
站 A 
证 明 因 Sww 委 上 < Suwo+rl， 可 见 
S wa) t ONW+1 
(3. 3. 1) NOG) NG ~ Na) 


然而 , 因 Sww/N(2) 是 前 入 (2) 个 来 到 间隔 的 平均 值 , 由 强大 数 定 律 得 出 , 当 
NG -> 00 时, Synw/AN(2) 一 六 。 但 由 于 上 oo 时 NG) 一 co ， 所 以 上 co 时 


ONG) > 
N (i) ‘ 
又 写 
| 心 NA+1 | 和 | 
N (2) NOD+T1JL NO) 
由 同样 的 推理 得 :一 oo 时 
ON +1 
NCG) fF 


现在 由 (3. 3.1) 知 结论 成 立 , 因为 i/N(z) 介 于 两 变量 之 间 , 它们 在 上 一 co 时 都 
收 合 于 py。 

命题 3. 3. 1 说 以 概率 1， 长 时 间 后 更 新 发 生 的 速率 将 等 于 1/ 
A#。 为 此 称 1/p 为 更 新 过 程 的 速率 。 

我 们 要 证 明 更 新 的 平均 速度 的 期 望 m G2) / 也 收敛 于 1/p。 然 
而 在 给 出 证 明之 前 ， 我 们 觉得 先 离开 本 题 ， 讨 论 一 下 停 时 与 瓦尔 
德 等 式 是 很 有 用 的 。 

3.3.1 瓦尔 德 等 式 

设 关 /|， 关 ;，… 为 一 列 独立 随机 变量 。 我 们 有 以 下 定义 。 
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定义 整 值 随机 变量 入 称 为 序列 让 1， 让， … 的 停 时 ， 知 对 一 
切 4 二 1，2,，…， 事 件 {NN 二 nn) 与 X11，X.+z，… 独 立 。 

直观 上 看 ,我们 依次 观察 诸 X,, 以 NN 记 在 停止 观察 之 前 所 观 
察 的 次 数 ,。 阁 入 二， 则 在 观察 X; ,… ,XX， 之 后 与 观察 XX,41 ,XX,+2， 


… 之 前 我 们 停止 观察 。 
例 3.3(Ca) 设 X,, n=1，2，…， 相 互 独立 且 使 得 
P{X, 一 0) = P{X,=1}=— 元， n= 1,2, 
如 果 我 们 令 


N 一 min(n: 六 | 十 … 十 X, 二 10} 
则 六 是 一 个 停 时 。 我 们 可 以 将 N 看 作 连 续 地 抛掷 一 校 均 匀 硬 币 的 试验 的 停 
时 ,试验 在 正面 出 现 次 数 达 到 10 次 时 停止 。 
例 3.3(b) 设 X.， mn 一 1]，2，…， 相 互 独立 上 且 使 得 


PiX, =—1} = P(X,=1}= 少 
则 
N= min{n: XI 二 … 二 + X,=1} 

是 一 个 停 时 。 它 可 以 看 作为 一 个 赌 徒 的 停 时 ,他 在 每 局 赌博 中 等 可 能 地 赢得 
或 输 掉 一 元 , 且 决 定 一 旦 领先 就 停止 。( 下 一 章 中 将 证 明 , 以 概率 1，N 是 有 
限 的 。) 

定理 3.3.2 (瓦尔 德 等 式 ) 若 Xi， 六 ，，… 是 独立 同 分 布 的 随 
机 变量 ， 期 望 有 限 ， 且 入 是 XY，X,， … 的 停 时 ， 使 得 ELN] ~ 


co， 则 
N 
E| > )X, |= ELNJELX] 
证 明 令 
1 -人 车 入 衬 nn 
” 0， 若 N<z 
我 们 有 
2 X= > 和， 
因此 ， 
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(3. 3. 2) E[ DX |] = 有 [| BX,L, |=[ DE [X71,] | 
然而 了 一 ] 当 且 仅 当 我 们 连续 观察 和 1， 及 2， ， X, 1 之 后 不 停 下 来 。 所 以 了 
由 Xi，…，X 决定 而 与 和 , 独立。 于 是 从 (3. 3. 2) 我 们 得 到 


ET Sx,]— DELX,JELL,] 
= ELX] ET7] 


~ E[X] SPIN > #) 
_ EFXJELN] 
注 记 在 (3.3.2) 式 中 ,我 们 未 说 明理 由 就 变换 了 期 望 与 和 号 
的 顺序 。 为 论证 其 可 交换 性 , 以 X; 的 绝对 值 替换 和， 此 时 因 各 项 
都 非 负 交换 顺序 是 合理 的 。 然 而 根据 勒 贝 格 控 制 收敛 定理 ， 这 就 
缠 含 了 原来 的 交换 顺序 是 允许 的 。 
对 于 例 3. 3(a) 来 说 ， 瓦 尔 德 等 式 蕴含 了 


EL[X, 十 … 十 XN] 一 5EN 


然而 ， 由 N 的 定义 XX 十"… 十 XN 二 10， 从 而 ELN | 一 20。 
将 瓦尔 德 等 式 的 结论 应 用 到 例 3. 3 (b) 会 有 等 式 ELXi 十 … 
十 Xn] 二 ELN ELX]。 然而 Xi 十 … 十 XN 一 1 及 无 LX] 一 0， 从 而 
得 出 矛盾 。 所 以 瓦尔 德 等 式 不 可 应 用 , 这 就 得 出 结论 有 LN = co。 
3.3.2 回 到 更 新 理论 
以 Xi，Xs*，… 记 一 更 新 过 程 的 来 到 间 隅 ， 让 我 们 在 上 之 后 的 
第 一 个 更 新 即 NG) 十 1 次 更 新 时 刻 人 停止。 为 了 证 实 VGo 十 1 是 
序列 XX, 的 停 时 ， 注 意 到 
NG 十 1 一 ?全 NGN 一 7 一 1 
全 XI 十 … 十 X NT 委 上 XI 十 … 十 XNDt 
于 是 事件 {NGQ) 十 一 2 只 依赖 于 瑟 ，…， 忆 ,， 故 与 忆 ， ，… 
独立 ; 因此 wo 十 1 是 一 个 停 时 。 从 瓦尔 德 等 式 我 们 得 到 ， 当 
EL[X]< 二 2 时 
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E[X,+*… 二 Xvw+ = ELXJELN CG)+1] 


或 等 价 地 有 下 列 
系 3.3.3 若 p<co， 则 
(3. 3. 3) 天 [LSvw |=pLm (1) 
现在 我 们 能 证 明 下 列 
定理 3. 3. 4〈 基 本 更 新 定理 ) 当 t > 时 
mm 
一 (其 中 性 0) 
证 明 首先 假设 kw< ce 。 现 在 有 ( 见 图 3. 3. 1) 
SNwti>t 
取 期 望 并 用 系 3. 3. 3 得 
LLmCe) +1]>t 
这 蕴 售 本 
(3. 3. 4) liminf 


于 和 


以 另 一 方面 辐 定 一 常数 M， 且 定义 一 个 新 的 更 新 过 程 (X.， mn 一 1， 2 
…} 如 下 ; 


> 请 


双 Xs,， 当 XEM, 2 一 1，2，… 
”IM, 当 X,.>M 
令 5= 字 , 及 困 () = supln :5,<<+) 。 由 于 这 个 截 尾 更 新 过 程 的 来 到 闻 
隔 时 间 以 M 为 界 ， 我 们 得 到 
SnNo+I<E 十 AM 
因此 由 系 3. 3.3， 
[m2) + 1 jut+ M 
其 中 pw 一 E[X,]， 于 是 


. m(t) 1 
limsup < 一 


而 因 S, 委 S$, ,得 和 GD) 之 NG 及 人 


< 
信访 


(3. 3. 5) limsup 一 


令 M-c 得 
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m(t) -1 
t yy 


(3. 3.6) limsup 
从 (3. 3.4) 及 (3. 3.6) 得 结论 成 立 。 
当 yy 一 品 ， 我 们 再 考虑 截 尾 过 程 ， 由 于 当 M-~ce 时 AH 一 co， 从 
(3. 3. 5) 知 结论 成 立 。 
注 记 ” 初 看 一 下 ， 仿 佛 这 个 基本 更 新 定理 应 当 是 命题 3. 3. 1 
的 一 个 简单 推论 。 也 就 是 由 于 平均 更 新 速率 以 概率 1 收敛 于 1/p， 
这 不 就 应 蕴含 了 平均 更 新 速率 的 期 望 也 收敛 于 1/y 吗 ? 然而 我 们 
必须 小 心 ; 考虑 以 下 例子 。 
设 U 是 (0,1) 上 均匀 分 布 的 随机 变量 。 定 义 随机 变量 
Y,，7 之 1, 如下: 
y _- 0， 在 忆 盖 1/m 
172， 若 Ul1/n 
因为 以 概率 1,U 大 于 0, 故 得 对 一 切 充分 大 的 n,Y, 将 等 于 0, 即 


对 一 切 大 到 使 二 <U 的 x，Y, 将 为 0。 因 此 ， 以 概率 1,n 一 oo 时 
Y,—> 0 
然而 ， 
E[Y,]=nP{U<~=)=n. =] 


所 以 ， 即 使 随机 变量 序列 Y, 收敛 于 0，Y, 的 期 望 值 却 恒 等 于 1。 
我 们 以 证 明 上 ~ce 时 NG) 为 渐 近 正 态 分 布 来 结束 本 节 。 为 了 

证 明 这 一 结果 ， 我 们 不 仅 使 用 中 心 极限 定理 (以 证 明 5S; 是 渐 近 正 

态 的 ) 且 要 使 用 关系 式 

(3. 3.7) N(D)<n © > 


定理 3.3.5 设 来 到 间隔 的 均值 x 和 方差 oo 有限 , 则 i>oo 时 


， NG 一 Lp 1 > 2 
pO Ye ey na 
/AL DA 一 
证 明 令 r,=t/p 十 ye Mt/J， 则 
AN 人) 一 上 AU 
一 -一 一 >| PNG 
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一 已 人 49- >1t} (由 3. 3. 7) 
SS, —rg 

-人 wan 
sr a) | 


-人 >， 


| 


现在 由 中 心 极限 定理 ， 当 :于 是 ) 欧 于 吕 时 , (5, 一 78)/o v7 收 化 于 
均值 为 0 方差 为 1 的 正 态 随机 变量 。 义 因 上 一 ce 时 


—1l/2 


yo 
一 vl 1 十 > 
+ 六 | 
可 见 
P| 一 A <»)- 1 『 02 
GAN] AN 2x —Y¥ 
又 因 
| edz 一 | ei2dx 
_ 四 
故 结论 成 立 。 
注 记 


4 在 上 面 的 论证 中 有 点 小 困难 , 因为 要 使 用 关系 式 (3. 3.7)， 
应 是 一 个 整数 。 然 而 使 上 面 的 论证 严格 并 不 太 困 难 。 
4i) 定理 3. 3. 5 说 , (1) 是 渐 近 正 态 的 , 均值 为 上 /Ap 方差 为 
to /pe 


3. 4 ”关键 更 新 定理 及 其 应 用 


非 负 随机 变量 X 称 为 格 点 的 ， 若 存在 4 之 0 使 得 >)P {X 一 


nd} 二 1。 即 X 是 格 点 的 , 大 XX 只 取 某 个 非 负 数 4 的 整数 倍 , 具有 
这 性 质 的 最 大 的 a 称 为 X 的 周期 。 若 X 是 格 点 的 ,下 是 X 的 分 布 
肖 数 ， 则 我 们 称 是 格 点 的 。 
我 们 不 加 证 明 地 叙述 下 列 定理 。 
定理 3. 4. 1 布莱克 威 尔 定 理 ) 
ss 7 了 7]l 。 


Qi) 乔 下 不 是 格 点 的 ， 则 对 一 切 a 之 90, 1 一 oo 时 
m(tia)—m(t) -> a/k 
(ii) 寿 了 是 格 点 的 ， 周 期 为 4d， 则 nn 一 co 时 
E[ 在 时 刻 nd 更 新 的 次 数 」 一 4d/p 
布 菜 克 威 尔 定理 说 ， 痢 F 不 是 格 点 的 ， 则 在 一 远离 原点 的 长 
为 a 的 区 间 中 更 新 次 数 的 期 望 近似 于 a/x。 这 是 十 分 直观 的 , 因为 
远离 原点 时 初始 影响 好 像 耗 尽 了 ， 所 以 
(3. 4. 1) g(a)=limLm(tta)—m(z)] 
应 当 存 在 。 然 而 ， 如 果 上 述 极限 确实 存在 ， 作 为 基本 更 新 定理 的 
一 个 简单 推论 它 必 等 于 a/w。 为 了 明白 这 一 点 ， 首 先 注意 
8(Ca 十 0) 一 lim[nz 十 4a 十 5) 一 m(z)] 
一 limLze(t 十 4 十 5) 一 mm(t 十 a) 
十 mt 二 a) 一 mm(t)] 
= g(b) 二 g(a) 
然而 ，g (a 十 6) 二 g(a) 十 g (6) 的 唯一 (递增 的 ) 解 是 
g(a) = ca, a>>0 
其 中 < 是 某 个 常数 。 为 了 证 明 c 王 1/w， 定 义 
T=m(l1)—m(0) 
Xm(2)—m(1) 


X=—=mn)—m(nm1) 


则 
limx, =c 
有 约 含 了 
ji A 十 … 十 文 ， 
im C 
一 7 
或 


I mn) 
Im 一 一 一 =c 


Hr OO n 


因此 ， 由 基本 更 新 定理 ，c 一 1/m。 

当 五 是 格 点 的 ,具有 周期 2, 则 (3. 4.1) 中 的 极限 不 可 能 存在 。 
因为 此 时 更 新 只 能 发 生 在 4 的 整数 倍 的 时 刻 ， 于 是 在 一 远离 原点 
的 区 间 中 更 新 次 数 的 期 望 显然 本 来 就 不 依赖 于 区 间 之 长 ， 而 是 依 
赖 于 它 包含 多 少 个 形式 为 nd， n 宇 0, 的 点 。 于 是 在 格 点 的 情形 有 
关 的 极限 是 在 时 刻 na 更 新 次 数 的 期 望 的 极限 , 且 当 lim 五 [在 时 刻 
nd 更 新 的 次 数 」 存在 时 ， 由 基本 更 新 定理 它 又 必须 等 于 di/w。 若 
来 到 间隔 总 是 正 的 ， 则 布 菜 克 威 尔 定理 的 (ii 说 ， 在 格 点 的 情形 

limP {在 时 刻 nd 更 新 ) = d/p4 

设 h 是 定义 在 [0,coJ 上 的 一 个 函数 。 对 任意 4a 之 0, 以 m， (a) 

与 及,《a) 分 别 记 hCG) 在 区 间 (x 一 1D)a 过 1 过 na 上 的 上 确 界 与 下 


确 界 。 若 对 一 切 a > 0, > ) 殉 ,Ca) 与 > mla) 有 限 ， 且 
lima > mCa) = lima Si ma) 
称 为 直接 黎 曼 可 积 。h 为 直接 笋 曼 可 积 的 一 个 充分 条 件 是 
(i) 对 一 切 达 0, h(1) 之 0， 
(ii) h(z) 非 增 ， 
Gii) | ha 一 co， 


我 们 将 不 加 证 明 地 叙述 下 列 定理 ， 它 以 关键 更 新 定理 著称 。 
定理 3.4. 2〈 关 键 更 新 定理 ) 若 厂 不 是 格 点 的 ， 且 若 h(t) 直 
接 黎 曼 可 积 ， 则 


lim| hc — Xdm(x) 一 | RC 
tooy 0 0 性 
其 中 
jo 
m(z) = > F(z) 而 4 =| F(adt 
n=] 0 
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为 了 对 关键 更 新 定理 有 个 感性 认识 ， 我 们 从 布莱克 威 尔 定理 
着 手 说 明 如 下 : 由 布莱克 威 尔 定理 ， 我 们 有 
ji Mt 十 2) 一 Mt 1 
t— oo a 4 
因此 
m(t + a) m(t) 1 
« A 


lim lim 


a too 


假定 我 们 能 论证 极限 可 交换 ， 藉 得 到 


lim dm(t) 一 工 
一 at A 


关键 更 新 定理 正 是 上 述 结果 的 一 种 形式 。 

能 够 证 明 布 莱克 威 尔 定 理 与 关键 更 新 定理 是 等 价 的 。 习 题 9 
费 求 读者 以 关键 更 新 定理 推出 布莱克 威 尔 定 理 ; 而 以 阶梯 函数 通 
近 直 接 黎 曼 可 积 函 数 可 证 明 逆 命题 。 

在 第 八 章 的 8.3 节 中 在 了 连续 且 其 失效 率 荫 数 有 界 并 大 于 
一 个 正 数 时 ， 给 出 了 布莱克 威 尔 定理 的 一 个 概率 证 明 。 

关键 更 新 定理 是 一 个 很 重要 且 有 用 的 结果 。 当 要 计算 在 时 刻 
# 的 某 些 概率 或 期 望 g(#) 的 极限 时 , 便 要 用 到 它 。 在 应 用 它 时 , 我- 
们 采用 的 技巧 是 先 关 于 在 t 之 前 (或 在 时 刻 四 的 最 后 一 个 更 新 的 
时 刻 取 条 件 而 导出 一 个 gC2) 的 方程 。 如 我 们 将 见 到 的 , 这 就 产生 
一 个 如 下 形式 的 方程 : 


g(t) =hG)+ | ac 一 Xdm(t) 


我 们 从 一 个 引 理 开始 , 它 给 出 在 上 之 前 (或 在 时 刻 妃 的 最 后 一 
个 更 新 时 刻 Sw 的 分 布 。 
引 理 3. 4. 3 


P(Swo <s} = FW + |FG— ydm(y), t>s>0 
证 明 
PlSxw <s}= DP{S, Ss,S, 1>1) 
n= 二 心 
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= F(t) 十 >》 忆 (9 Ss > i) 


天 一 | 


ae 
-Fo 二 | P{S, Ss, 

n=1” 

Sst1 > £1S, = y}dF,(y)| 
=FOW + BD | Fe — wdF.cy) 

n=]1™? 


一 下 (1) 十 | Fe 一 yadl PFC 
o n=] 


二 (4) 十 | FG 一 ydm(y) 


因为 所 有 的 项 非 负 ， 所 以 积分 与 求 和 可 换 序 。 
注 记 
(1) 从 引 理 3. 4. 3 得 
P{Swe) 一 0} 二 F(z) 
dF (y) = FG ydm(y), 0<y<o% 


NY) 


(2) 为 了 直观 地 理解 上 式 ， 假 设 连续 ， 具 有 密度 1， 则 
m(y)= > F,(y), 从 而 ， 对 y 守 0 


dm(y) = > f(y)dy 
nn 二 1 


= 2ZP{ 在 (?,y 十 dy) 中 发 生 第 ”次 更 新 


二 Pt 在 (y,y 十 day) 中 发 生 更 新 ) 
所 以 ，Sxwo 的 概率 密度 为 
Js (y)dy 王 Pl 在 (y,y 十 dy) 中 发 生 更 新 , 且 下 一 个 来 到 间 

隔 之 一 y} 二 dm (YF GE 一 y) 
现在 我 们 给 出 一 些 应 用 关键 更 新 定理 的 例子 。 我 们 一 再 使 用 
的 技巧 是 关于 Svw 取 条 件 。 z 
3. 4.1 交错 更 新 过 程 
。75 。 


考虑 一 个 系统 ， 它 有 两 个 状态 : 开 或 关 。 最 初 它 是 开 的 且 持 
续 开 的 时 间 是 Z1; 而 后 关闭 且 持 续 闭 的 时 间 为 六; 之 后 又 打开 ， 
时 间 为 Z:;， 又 关闭 ， 时 间 为 Y，,; 再 打开 等 等 。 
我 们 假设 随机 疝 量 (Z,, 站,), nn 之 1， 独立 同 分 布 。 因此， 随机 
变量 序列 (2.1 与 4Y,} 都 是 独立 同 分 布 的 ; 但 允许 Z, 与 Y, 是 相依 
的 。 换 言 之 ， 每 当 过 程 打开 时 ， 一 切 就 重新 开始 ， 但 当 它 关闭 时 
允许 关闭 的 时 间 依 赖 于 前 一 段 打 开 的 时 间 。 
设 妃 是 2 的 分 布 ,G 是 Y, 的 分 布 , 而 是 2 十 Y,，n 之 1， 
的 分 布 。 又 令 
已 GOD) 一 已 (时刻 上 系统 开 着 ) 
定理 3.4.4 若 互 LZ,. 十 7Yj<coe， 且 下 不 是 格 点 的 ， 则 
E(Z,) 

E[2,] + ELY,)] 

证 明 每 当 系统 打开 时 就 说 发 生 一 次 更 新 。 对 上 之 前 (或 1 时) 最 后 一 
次 更 新 发 生 的 时 刻 取 条 件 得 

PL) 一 P{ 在 时 刻 t 开 着 |Swo == 0}P{Swo, = 0)} 


十 ee 
+ |，P{ 在 时 刻 : 开 着 |Swo = yjaFava C) 


limP() 一 


已 (在 时 刻 上 开 着 |Snw 一 0 ) 一 了 (DZ >> 引 2 十 7 之 全 
一 HCG/F() 
且 对 yt 
Pi 在 时 刻 t 开 着 |Swo 一 y) 一 PIZ > 一 y|2Z 十 了 > 一 》 
= HG — YW/FG— y) 
因此 ， 利 用 引 理 3. 4.3 得 


Pt) = B&G) | Hc 一 ydm(y) 
0 


其 中 m(y) = > PCy)。 万 C) 显然 是 非 负 不 增 的 , 且 | 五 Cd = E[2] < 


co 。 因 为 后 一 式 也 蕴含 了 一 co 时 , 吾 (t) > 0 ， 所 以 只 要 利用 关键 更 新 定理 
我 们 有 
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上 +co 
po Ey 


车 令 Q(t) 二 Pt 在 时 刻 t 时 关 着 ;二 1 一 了 G4) ， 则 


Q(t)— | 
EL[Z] + ELY] 
我 们 注意 到 ， 系 统 最 初 是 开 着 的 这 一 事实 在 极限 中 不 起 什么 作用 。 
定理 3. 4.4 是 十 分 重要 的 ， 因 为 许多 系统 能 以 交错 过 程 为 模 
型 。 例 如 ， 考 虑 一 个 更 新 过 程 ， 以 YG) 记 以 上 直到 下 一 次 更 新 的 
时 间 ， 而 以 4(z) 记 L0,tj 内 最 后 一 次 更 新 之 后 的 时 间 ， 即 
Y(t) 一 wwNo+l 一 4 
A(1) 一 上 一 中 Na 
称 Y(z) 是 时 刻 : 的 过 剩 或 剩余 寿命 ， 而 称 4(52 是 时 刻 上 的 年 龄 。 
奉 假 设 更 新 过 程 是 将 一 个 部 件 投入 使 用 而 一 旦 失效 即 更 换 所 产生 
的 ， 则 44) 表示 在 时 刻 t 所 使 用 的 部 件 的 年 龄 而 YG) 表示 它 的 
剩余 寿命 。 
假设 我 们 想 推导 出 己 (4G) 委 z)。 为 此 将 一 个 开 一 关 的 循环 
对 应 于 一 个 更 新 区 间 , 且 若 在 上 时 的 年 龄 小 于 或 等 于 <， 就 说 系统 
在 时 刻 上“ 开 着 ”。 换 言 之 ， 在 一 个 更 新 区 间 的 前 z 时 间 内 系统 
开 痢 ”而 其 余 时 间 “ 关 着 ”。 那 么 ， 若 更 新 分 布 不 是 格 点 的 ， 则 
由 定理 3.4. 4 得 
limP {AC) 7} = E[min(X,zr) |]/ELX | 


一 | P{min(X,z) > yldy/ELX] 


一 | Fopaymn 
类 似 地 为 了 得 到 P{Y(o 委 x} 的 极限 值 , 我们 说 在 一 个 更 新 循环 
的 最 后 x 时 间 内 系统 “ 关 着 ”而 其 余 时 间 “ 开 着 ”。 于 是 在 一 次 循 
环 中 “ 关 着 ”的 时 间 是 minCz，X)， 从 而 
limP{YC) < zx} = limP (在 时 刻 t 关 着 ) 
= E[min(z,X)]/E[X] 
。 77。 


= | Fwdy/p 
0 


于 是 合 起 来 我 们 证 明了 下 列 
命题 3.4.5 ”车 来 到 间隔 的 分 布 不 是 格 点 的 ， 且 p< ce， 则 
imP {Y(t) < z) = limP{AG) < #) = | F(y)dy/p 


注 记 .为 了 理解 剩余 寿命 与 年 龄 的 极限 分 布 为 什么 是 相同 的 ， 
考虑 一 个 已 运行 很 长 时 间 的 过 程 ; 例如 ， 假 设 它 起 始 于 二 一 co。 
如 末 我 们 把 时 间 倒 过 去 往 回 观察 ， 那 么 相继 事件 之 间 的 间隔 仍然 
独立 且 具 有 分 布下, 因此 , 往 回 观察 看 到 的 是 一 个 分 布 相同 的 更 新 
过 程 。 但 往 回 观察 时 , 在 时 刻 上 的 剩余 寿命 正 是 原 过 程 在 时 刻 t 的 
年 龄 。 我 们 将 发 现 把 时 间 倒 过 去 往 回 看 的 技巧 在 第 四 章 与 第 五 章 
中 研究 马尔 可 夫 链 时 是 十 分 有 价值 的 .( 使 剩余 寿命 与 年 龄 的 分 布 
发 生 关 系 的 另 一 方法 参见 习题 11。) 

为 一 有 趣 的 随机 变量 是 Xx 二 Snow 一 Snw， 或 等 价 地 

Xnw+ = A() 十 了 (区 
于 是 Xnw+1 表 示 包 含 点 t 的 更 新 区 间 的 长 度 。 在 习题 3 中 我 们 证 
明 . 

P{XNwri > zx} 之 下 (z) 
印 是 对 任何 二 ， 含 点 上 的 更 新 区 间 之 长 大 于 z 较 之 于 一 个 普通 的 
更 新 区 间 之 长 大 于 z 更 加 可 能 发 生 。 这 个 结论 ， 初 看 起 来 似乎 令 
人 吃惊 ， 它 以 检查 悖 论著 称 。 

现在 我 们 用 交错 更 新 理论 来 得 到 Xww+i 的 极限 分 布 。 

仍 设 一 个 开 一 关 循 环 对 应 于 一 个 更 新 区 间 ， 且 如 果 整 个 循环 
时 间 大 于 z 就 说 整个 循环 时 间 都 是 开 着 的 ， 否 则 开 着 的 时 间 就 是 
零 。 即 此 系统 在 一 循环 期 中 或 全 开 着 ( 当 更 新 区 间 长 度 大 于 xz 时 》 
或 全 关 着 。 现 在 

tvorl 之 并 二 三 (包含 上 的 更 新 区 间 长 度 之 zx} 
三 了 {在 时 刻 t 开 着 ) 
于 是 由 定理 3.4.4， 若 下 不 是 格 点 的 ， 得 
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limP{Xwo 1 >x) = 和 镇 环 中 的 开 时 - 


二 


一 E[XIX 伍 工 |] 天 (xz)V/U 
=- 人 yercoyz 


或 等 价 地 有 
3.4.2) limP{Xvon<z)=| ydF Cy)/p 


注 记 ”为 了 更 好 地 理解 检查 悖 论 ， 作 如 下 推理 : 因为 直线 被 
更 新 区 间 所 复 盖 ， 较 长 的 区 间 ( 相 对 于 较 短 的 区 间 而 言 ) 复 盖 点 + 
的 可 能 性 不 是 更 大 吗 ? 事实 上， 在 极限 中 ( 当 : 上 一 co) 确 实 是 这 样 ， 
长 为 y 的 区 间 与 长 为 1 的 区 间 相 比 , 复 盖 上 的 可 能 性 , 前 者 y 倍 于 
后 者 。 如 果真 是 这 样 , 那么 包含 点 上 的 区 间 的 密度 , 记 作 gg (y)，, 就 
会 是 gl(y)dy 一 yd4F(y)/p( 因 为 df(y) 是 任意 一 个 区 间 长 为 y 的 
概率 ,而 y/p 是 此 区 间 含 点 上 的 条 件 概 率 ) .但 由 (3.4. 2) 看 到 这 实 
际 上 正 是 极限 密度 。 

考虑 下 列 ， 它 义 一 次 说 明了 交错 更 新 过 程 的 多 种 用 法 ， 

例 3.4 (a) 存储 论 一 例 . 假设 顾客 按 一 更 新 过 程 来 到 一 家 出 售 单一 品 
种 商品 的 商店 ， 来 到 间 隐 分 布 是 非 格 点 的 。 顾 客 的 需求 量 假定 是 独立 的 ， 
具有 共同 的 分 布 G。 商店 使 用 如 下 的 (s,S) 定 货 策略 : 车 在 为 一 顾客 服务 之 后 
存货 量 低 于 s, 则 立即 定货 使 之 达到 SS, 否则 不 定货 。 于 是 若 为 一 顾客 服务 之 
后 存货 量 为 zx， 则 定货 量 是 

SS 一 ， 若 工 之 s 
0， 车工 六 ， 
这 里 假定 定货 瞬时 间 即 被 补足 。 

以 居 (0 记 时 刻 上 的 存货 量 , 我 们 想 求 imPtX(2) 之 zx}。 设 X(0) 二 S， 如 
果 在 贷 存量 至 少 为 z+ 时 我 们 说 系统 是 “ 开 ” 的 ， 否则 是 “ 关 ” 的 ， 那 么 这 正 
是 一 个 交错 更 新 过 程 。 因 此 ， 从 定理 3. 4.4 得 


_ E[ 在 一 个 循环 中 存货 量 之 工 的 时 间 ] 
CR 所 | 一 个 循环 的 时 间 ] 
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(3. 4. 3) AN 一 min(aszyi 十 … 十 郊 全 9 一 工 
那么 正 是 这 一 个 循环 中 的 第 NN, 个 顾客 使 得 存货 量 降 到 之 下 , 而 正 是 第 N， 
个 顾客 结束 这 一 循环 。 因 此 ， 以 X，(i 宇 1) 记 顾 客 的 来 到 间隔 ， 则 


在 一 个 循环 中 “ 开 ” 的 时 间 = UX 


一 个 循环 的 时 间 = 之 /ZX 
假定 来 到 间隔 与 相继 的 需求 量 独立 ， 于 是 取 期 望 得 


E| 2)X, | ETN ] 
(3.4.4) | limP{X() 并 = 一 全 一 一 一 EFN 


a[ DX] 
然而 ， 因 为 Y;， i 之 1， 独 立 同 分 布 ， 由 (3.4. 3) 我们 可 把 N, 一 1 解释 为 
一 个 来 到 间隔 为 Y;, i 之 1, 的 更 新 过 程 到 时 刻 S 一 x 为 止 更 新 的 次 数 。 因 此 ， 
EL[LN.] = me(S 一 Z) 十 1 
EL[N,] = mce(S 一 ?7 十 1 
其 中 G 是 顾客 需求 量 的 分 布 且 
malt) 一 SG,0) 


二 1 


因此 ， 从 (3. 4. 4) 得 到 


limP{X() x) = 工 十 cko 一 工 ) 


1] 十 mackS 一 5) 
3. 4. 2 ”极限 平均 剩余 寿命 与 m(t) 的 展开 式 
让 我 们 从 计算 非 格 点 的 更 新 过 程 的 平均 剩余 寿命 开始 ， 关 于 
Sww 取 条 件 得 ( 据 引 理 3. 4. 3) 
ELY() j=E[LY GQ)|Sw,=0JF() 
十 | ELY OW 1Sw0=yJF (~ ydm(y) 


Xx 


TS 


了 — YY(!:)— 


图 3. 4.1 Sww= 二 y; x 二 更 新 


es 8O。 


现在 ， 
E[YC()|ISyw = 01= E[X— tIX>t| 
E[YCGQ)|Snw = yj] = EL[X— (t— y)|IX>t— yj 
这 里 上 式 成 立 是 因为 Svew 二 yy 意味 着 在 y 有 一 更 新 且 下 一 个 来 到 
的 时 间 ( 记 为 卫 ) 要 大 于 :一 y( 见 图 3. 4. 1)。 因 此 ， 
E[Y(2)] = EL[X-tIX > F(t) 
+ | ELX — (tft—yIX>t— ytG— ydmt(ly) 
现在 可 以 证 明 , 倘 若 ELX?j 过 吕 ,函数 产 () 一 瓦 [和 一 丰 买 全 遇刺 人) 
直接 黎 曼 可 积 , 从 而 由 关键 更 新 定理 得 


E[Y C0)] > | ECX XEFd/p 
一 [je ~ dF (rdi/n 
— 六 | 一 PdtdF(z)/j (交换 积分 次 序 ) 


一 | zidF (xz) /2p 
= ELX’?]/24 
于 是 证 得 下 列 
命题 3. 4.6 
如 果 来 到 间隔 分 布 不 是 格 点 的 ， 且 ELX?] 二 co， 则 
limELY CD 一 ELX? J/2¢ 
现在 sxvwwo+， 有 即 : 后 的 第 一 个 更 新 时 刻 能 表示 为 
Nao+l 一 十 了 () 
取 期 望 且 利用 系 3. 3. 3， 我 们 有 
pm(t) 十 1) =t 二 Ef[Y()] 
或 


mi 一 二 一 到 GO 
Ap A 


因此 ， 从 命题 3. 4. 6 得 下 列 


。81] 。 


系 3. 4.7 
若 EL[X?*] < oo 且 下 为 非 格 点 的 ， 则 1->o2 时 ， 
XxX? 
m0 一 让 一 

3.4.3 年 龄 相依 的 分 支 过 程 

假设 一 生物 在 它 的 生命 结束 时 按 概率 分 布 {Pj， 7 一 0，1，2， 
…}》 产生 出 随机 个 后 代 。 进 一 步 假定 所 有 的 后 代 彼 此 独立 地 活动 
且 依 同 一 概率 分 布 (Pj; 产生 各 自 的 后 代 。 最 后 ,让 我 们 假定 这 些 
生物 的 寿命 是 独立 的 随机 变量 ， 上 共有 同样 的 分 布 

以 X(t) 记 在 时 刻 t 活 着 的 生物 个 数 。 此 随机 过 程 
( 文 (2) ,i 之 0} 称 为 年 龄 相依 的 分 支 过 程 。 我 们 关心 的 是 确定 二 


2 ;ojPj>1 时 MG) = E[XQ)] 的 渐 近 式 。 
定理 3.4.8 若 义 ,一 1, m 放 1, 且 F 不 是 格 点 的 ; 则 :一 co 时 ， 
m— 1 
十 ca 
mal Xe “arF (rz) 
其 中 a 是 满足 下 式 的 唯一 正 数 
| eaFdz) 一 了 
0 ?90 


e “M(t) 一 


证 明 ”关于 T〈 即 最 初始 生物 的 寿命 ) 取 条 件 ， 我 们 得 
M(t) 一 | ECX IT = sldF (Gs) 
然而 ， 


1,» > 
(3. 4. 5) ELX() T= |]= | 在 


m* M(t 一 s)， 者 5 委 ! 
为 了 理解 43. 4. 5) 为 什么 成 立 , 假设 T==s, si, 且 进 一 步 假设 此 生物 有 j 个 
后 代 , 则 在 时 刻 : 活着 的 生物 个 数 可 写成 关 十 … 十 7;, 其 中 Y; 是 在 时 刻 t 活 
着 的 第 i 个 后 代 的 子孙 (包括 它 自己 ) 个 数 。 显然 ,， 了，… 了 Y; 独立 , 具有 与 承 
(t 一 s) 同样 的 分 布 ， 故 EC 十 十 了 )) 二 MG 一 3); 取 jM(Q 一 ;) 的 期 望 ( 对 
力 得 到 (3. 4. 5)。 
于 是 从 上 面 我 们 得 到 
e 82。 


(3. 4. 6) MOU) = Fu) 一 m| MG _ dFs) 
现在 以 a 记 满 足下 式 的 唯一 正 数 : 


| “dF 1 
。 € ~ (y) 一 pa 


旦 定义 分 布 G 为 
Ga) 一 m| edaFCy)， 0 过 so 
心 


在 (3.4.6) 式 两 边 乘 以 e“ 且 利用 dGCs) 二 mre sdRG) 我们 得 到 
(3.4.7) e “M(1) = e “FC) 十 | eM — s)dG(s) 
令 f(D) 一 e “MQ) 及 h(t)=e-“F(), 运 用 卷 积 符号 从 (3. 4.7) 我 们 有 
f =h+i+fxG 

—h+Gxf 

=h+G* (h+G* /) 

=h+Gx*hi+G.*f 

= 有 hh 二 Gx*hi+G, < (hi+G* 7) 

二 有 十 G * 有 hh 二 G2 x* 有 hh 二 Gsx*f 


一 户 十 Gx 玉 十 Ga x hi Gx hiG xf 
由 于 C 是 某 个 非 负 随机 变量 的 分 布 , 故 得 * 一 ce 时 ,G.(GD) 一 0( 为 什么 ?)。 从 
而 在 上 式 中 令 ”一 co 得 
f=h+hx NG， 
二 
或 
fC) = h(t) + | uc — s)dmeols) 


可 证 明 h(z) 是 直接 黎 曼 可 积 的 , 故 由 关键 更 新 定理 


十 嗓 [ee 
| hd | e-<F (dt 
(3. 4. 8) f(D 一 一 一 = 一 一 一 
| XdG(lzr) 
0 


而 
十 ee 十 ee 十 cc 

(3. 4. 9) | e “F(t)dt 一 | -| dF (xr)at 
0 0 t 


es B83. 


十 ce 『 
一 | | e “dtdF (x) 
站 0 


1 {+™ 
一 | (1 一 ee“)dF (zr) 
Quo 


1 1 、 
一 了 (1 一 六 (由 a 的 定义 ) 
叉 
oo 十 co 
(3. 4. 10) | ZaCz(z) = m| Xe “dF (xz) 
0 | 0 
于 是 从 (3.4.8)，(3.4.9) 及 (3.4.10) 得 到 :一 oo 时 


27 一 


e “M(t) 一 一 
ma| xe “dr (zr) 
0 


3.5 延迟 更 新 过 程 


我 们 常常 考虑 这 样 一 种 计数 过 程 ， 它 的 第 一 个 来 到 间隔 与 其 
余 的 有 不 同 的 分 布 。 例 如 ,我 们 可 能 以 在 某 时 刘 t 二 0 开始 观察 一 
个 更 新 过 程 。 若 在 时 刻 上 未 发 生 更 新 , 则 我 们 首次 观察 到 更 新 所 必 
须 等 待 的 时 间 的 分 布 不 同 于 其 余 来 到 间隔 的 分 布 。 

正式 地 , 设 {(X,,2 王 1,2,…)} 为 一 列 独立 非 负 随机 变量 , Xi: 具 


有 分 布 G， 而 X, 具有 分 布 F， n>>1。 令 So 一 0，S, 一 和 4Xi， n> 
1， 且 定义 
Np(t)=supln: S,<t} 
定义 ”随机 过 程 {Nb(2) ,t 之 0) 称 为 一 般 或 延迟 更 新 过 程 。 
当 G=F 时 ,自然 这 就 是 通常 的 更 新 过 程 。 如 同 通常 的 情形 ， 
我 们 有 
P{Np»p(t)=n})=P{S,S<t}— PP(S, St) 
—G xX F,_1(t)—G x F,(t) 


心 


mptlt) = ELNDpQ) | 
则 容易 证 明 
8 84 和 


(3. 5. 1) mp(t)= 2)G x F,1(t) 
n= 二 1 
且 对 (3. 5.1) 取 变换 得 
GCs) 


(3. 5. 2) Mpls) 一 J 一 六 CS 


利用 通常 更 新 过 程 的 相应 结果 ， 容 易 证 得 延迟 过 程 的 类 似 的 
极限 定理 。 我 们 将 下 列 命题 的 证 明 留 给 读者 。 
令 4 一 | zaFcn) 。 


命题 3. 5. 1 
GQ) 以 概率 ]，i->co 时 
人 pt 1 
i 4 
，， mp(t) 1 
(11) too 时， T° 


(iii》 若 下 不 是 格 点 的 ， 则 上 co 时 
mp(t + a) — mp(t) > 


Gv) 车 与 G 是 格 点 的 ， 周期 为 4， 则 w 一 oo 时 
EL 在 时 刻 nd 的 更 新 次 数 ] 一 亏 
() 若 忆 不 是 格 点 的 ，p< ce， 及 六 直接 黎 曼 可 积 ， 则 
| ac 一 madmpcoD 一 | hod/p 


例 3. 5(a) 假设 观察 了 一 列 独立 同 分 布 的 离散 随机 变量 Xi!, XX;,…, 且 
假设 我 们 跟踪 一 个 花样 〈 即 给 定 的 一 列 试验 结果 ) 出 现 的 次 数 。 如 设 花样 是 
2Z1，Zs， …，Zzt， 我 们 说 在 时 刻 n 这 花样 发 生 ， 如 果 关 ,二 zh XX 二 1 
Xi 一 zi。 例如 ， 若 花样 是 0，1，0，1， 而 序列 是 (X11,X;,…') 二 (1, 0, 
1，0，1，0，1，1，1，0，1，0，1，…)， 则 在 时 刻 5，7，13 这 花样 发 生 。 
者 我 们 以 NGz) 记 到 时 刻 = 发 生 这 花样 的 次 数 ， 则 {N (n) ,n 之 1} 是 一 个 延 述 
更 新 过 程 。 首 次 更 新 时 间 的 分 布 是 这 花样 首次 发 生 的 时 间 的 分 布 ; 而 后 面 的 
来 到 间隔 分 布 是 这 花样 的 各 次 复制 之 间 的 时 间 分 布 。 

假定 我 们 想 确定 此 花样 发 生 的 速率 。 由 延迟 更 新 过 程 的 强大 数 定律 ( 定 

e BH 。 


理 3. 5. 1 的 G)), 此 速率 将 等 于 花样 之 间 的 平均 时 间 的 倒数 .但 由 布莱克 威 
尔 定理 (定理 3. 5. 1 的 (iv)), 这 正 是 在 时 刻 ” 有 一 个 更 新 发 生 的 极限 概率 ， 
即 

(E[ 花 样 之 间 的 时 间 ]) 一 limP{ 在 时 刻 4 花样 发 生 ) 


=1l p(x=z,) 


因此 花样 发 生 的 速率 是 [| P{X 一 z)} ,而 花样 之 间 的 平均 时 间 是 (上 | P(X 
£7 

例 3.5Cb) 一 个 系统 由 个 独立 部 件 组 成 ， 各 部 件 的 活动 是 一 个 指数 
交 葵 更 新 过 程 。 更 具体 地 , 部件;，:= 1，2，…m， 处 于 正常 状态 的 时 间 是 均 
值 为 的 指数 变量 , 而 后 失效 , 在 恢复 正常 重新 开始 之 前 滞留 于 失效 状态 的 
时 间 是 均值 为 ws 的 指数 变量 ， 

假设 在 任何 时 刻 至 少 有 一 部 件 处 于 正常 状态 便 称 此 系统 这 时 在 工作 (这 
样 的 系统 称 为 并 联系 统 )。 如 果 我 们 以 NC) 记 此 系统 在 [0t] 内 变 成 不 工作 
( 即 发 生 故 障 ) 的 次 数 ， 则 {N() ,z>0} 是 一 个 延迟 更 新 过 程 。 

我 们 要 计算 系统 发 生 故 障 之 间 的 平均 时 间 。 为 此 我 们 先 看 看 当 : 很 大 而 
h 很 小 时 在 《1，1 十 h) 中 发 生 一 次 故障 的 概率 ， 在 〈z，: 十 4) 中 发 生 一 次 故 
障 的 一 种 情形 是 在 时 刻 : 从 有 一 个 部 件 正常 而 其 它 的 全 部 失效 ,而 后 此 部 件 
损坏 。 因 为 一 NE 能 的 情 5 全 在 到 的 本 估 庆 00) ,可 


1 
limP{ 在 (， 4 用 中 出 故 库 } 一 > | Pe I 1 ht oCh) 


但 由 布莱克 威 尔 定理 上 式 正 是 故障 之 闻 的 平均 时 间 的 倒数 的 倍 ， 所 以 令 . 
一 0 即 得 z 


EL 故障 之 间 的 时 间 j] 一 | 11 7 狂 元 二 二 2 


因为 一 个 故障 期 的 平均 长 度 是 ( > 1/4) “， 所 以 我 们 能 算得 一 个 工作 


期 的 平均 长 度 为 
EL 工作 期 的 长 度 ] 


=E[ 两 次 夏 障 之 间 的 时 间 ] 一 [ > 过] 


se 80。 


_ j=1 7 


1 A 加 
5 3 
ji rp A 
为 了 检验 上 式 ， 注意 到 这 系统 可 以 被 看 作 一 个 延迟 的 交错 更 新 过 程 ， 其 
处 于 不 工作 状态 的 极限 概率 是 


tomP; 在 :时 系统 故障 } -了 名 
现在 我 们 可 以 验证 上 式 实 际 上 等 于 一 个 故障 期 的 平均 长 度 除 以 一 个 循环 (或 
故障 之 间 的 时 间 ) 的 平均 长 度 。 
按照 通常 更 新 过 程 中 采用 的 同样 的 证 明 方 法 可 得 ， 在 i 之 前 
(或 在 时 刻 尹 的 最 后 一 次 更 新 时 刻 的 分 布 为 
(3. 5. 3) PP{Svwow 扫 SS) = GG() 十 | Fa 一 y)CzzpCy) 
当 pp< ce 时 ， 分 布 基 数 
FCz) = | Fdy/p zx 之 0 
称 为 了 的 平衡 分 布 ， 其 拉 普 拉 斯 变换 为 
(3.5.4) FF.(s)= | ea 


十 ee o> 

=| ec dF (ydzr/n 
D T 

一 | J edzar cy)/e 
0 Jo 


1 
一 二 | (] 一 e-?)GCFCy) 
_ 工 一 下 Cs) 


AL 

C= 有 .的 延迟 更 新 过 程 称 为 平衡 更 新 过 程 , 它 是 极其 重要 的 ， 
因为 假设 在 时 刻 t 我们 开始 观察 一 个 更 新 过 程 。 那 么 我 们 所 观察 
的 过 程 是 一 个 延 述 更 新 过 程 ， 其 初始 分 布 是 Y(t) 的 分 布 。 于 是 当 
t 很 大 时 ， 从 命题 3. 4. 5 得 所 观察 的 过 程 是 平衡 更 新 过 程 。 此 过 程 
中 的 平衡 性 在 下 一 定理 中 证 明 。 

以 Yp(2) 记 一 个 延迟 更 新 过 程 在 时 刻 t 的 剩余 寿命 ， 

和. 37 本 


定理 3. 5.2 对 于 平衡 更 新 过 程 有 : 

(1) mp(t)=t/p; 

(ii) P{YpQ) 志 zx} 二 F(x), 对 一 切 t 宇 0 成 立 ; 
(ii) {Np(z) ,t 宇 0} 具 有 平稳 增 量 。 

证 明 0G) 从 (3. 5.2) 与 (3.5.4) 我 们 有 


mn(s) = 均 


然而 , 简单 的 计算 表明 1/ps 是 泪 数 hC) 二 tf/z 的 拉 普 拉 斯 变换 , 于 是 由 变换 
的 唯一 性 可 得 
(ii) 对 于 一 个 延迟 更 新 过 程 ,关于 Sw(t) 取 条 件 , 利 用 (3. 5. 3) 可 得 
P{YpGQ)>x}=P{YpG)>7r Syw =0}G0) 
十 | Po > zx|ISne,) = s}F (tC— sjdmp(s) 
今 有 
P{YpQ@)>zx|Snw =0}=P{XI>t+zr|X>} 
_GG++z) 
GQ) 
PlYpG)>zr|Snw—=s) = P(XDt+7r—s |X — s} 
_ F(zr—s) 


F(t—s) 


因此 ， 

P{Yp() >7T}= GGG+7) + [Fa 十 工 一 sj)dmp(s) 
令 G=F。 且 利 用 (1) 的 结论 得 

P{YpG@) > x} = FG 27) 十 | Fe 十 工 一 3S)cd537]U 


_ r+ 
= F(t 十) 十 | FlyYady/r 
= F.(r) 

(iii) 为 证 Gii) ,注意 到 Np 必 十 ;) 一 Np(s) 可 解释 为 一 个 延迟 更 新 过 程 
在 上 时 间 内 更 新 的 次 数 , 其 初始 分 布 是 Yop(s) 的 分 布 。 这 样 就 从 Gi) 得 Gii) 的 
绪论 。 
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3.6 更 新 病历 过 程 


大 量 的 概率 模型 是 以 下 模型 的 特殊 情形 。 考 虑 一 个 更 新 过 程 
{N (2) ,t 之 0} ,其 来 到 间隔 XX,，n 之 1， 具 有 分 布下 。 且 假设 每 次 一 
个 更 新 发 生 , 我 们 收 到 一 份 酬劳 。 以 R, 记 在 第 ”次 更 新 时 刻 所 获 
得 的 酬劳 。 我 们 将 假定 R,, n 宇 1， 独立 同 分 布 。 但 我 们 允许 R, 可 
以 (通常 也 将 ) 依 赖 于 X, 第 个 更 新 区 间 的 长 度 。 所 以 我 们 假定 
(X.,R,) ,n 之 1 ,是 独立 同 分 布 的 。 令 


R(t)= > 
则 RL() 表 示 到 时 间 z 所 得 的 全 部 酬劳 。 设 
ELRj=ELR,], E[LX]=ELX,] 
定理 3.6,1 若 £LRj] 二 及 ELX] 过 0, 则 
(1) 以 概率 1， 1 一 > cc 时 


RG) ELR] 
t 下 [和 
. ELRG)] .ELR] 
Q11) ; ， 一 E[X] 
证 明 “为 证 G) 写 
NCOy 
RG) 2 
ff 1 
we) 
-| | [Ye 
NO : 
由 强大 数 定 律 可 得 ，t 一 co 时 
Nt) 
2,R, 
7 * ELR] 
而 由 更 新 过 程 的 强 极限 律 ，t 一 oo 时 
NG) 1 
上 E[X| 


ee RD . 


于 是 4) 得 证 。 
为 证 明 (1) 我 们 首先 注意 到 NO 十 1 是 序列 从 1， 及 ? ,… 的 一 个 停 时 ,也 是 
Ri,R;,… 的 一 个 停 时 (为 什么 ?)。 于 是 由 瓦尔 德 等 式 ， 
No) NO 十 1 
EL >)R] = 2 R; |—ELRnw+1] 
= m2) DECRI— ECRyG+1) 
从 而 


ELR()] (GO 十 ] E[ RN +) 
rt 1 i 


ELR]— 


车 能 证 明 t1>co 时 ELRwwrj/t>0, 则 由 基本 更 新 定理 可 得 所 求证 的 结论 ,为 
此 , 令 g() 二 ELRw(w+1j]。 关 于 Snow 取 条 件 得 

g(t) = ELRnvwrlSno = 0JFC) 

+ | ERwos: 1Swo = sJFG — Sydmes) 

然而 ， 

ELRnw+ilSnw =0J]= ELRi|X>i] 

ELRnw+ilSnw =s|= ELR, |X,>i—s] 
所 以 
(3.6.1) g0) = ELRIX >F0) 十 | ER,IX, >1— sJFG — dm(s) 


现在 令 
加 +% 
h(t) = ETR |X, > 1JF() = | EFR,|X, = zdF (zx) 


且 注 意 到 因为 
E|R| = | ELIR| IX, = zz) < oo 
得 
i>co 时 ,有 hCG) 一 0 日 hhQ) 雹 EIRI|， 对 一 切 上 成 立 ， 
于 是 可 选取 了 使 |hQ)| 过 8 对 任何 i: 宇 T 成 立 , 因此 从 (3. 6.1), 由 基本 更 新 
定理 得 


gz) | < | 产 C) | ri [ACE 一 Zz) | per + [hl — rz) ldmtlz) 
t ££ . 0 f tT i 


em(i 一 了 ) mt) 一 Ma 人 tt 一 了 ) 


和 了 十 7 ER| f 
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>» 1 ， 当 上 >co 

因 * 可 任意 小 而 得 g(G)/~0, 所 要 的 结论 得 证 。 

注 记 .者 每 当 一 更 新 发 生 我 们 就 说 完成 了 一 个 循环 ,那么 此 证 
理 说 长 时 间 之 后 的 平均 酬劳 (或 酬劳 的 期 望 ) 恰 是 一 个 循环 中 所 得 
的 酬劳 的 期 望 除 以 一 个 循环 的 时 间 的 期 望 。 

证 明 此 定理 时 会 受到 诱惑 去 断言 ELRww+1j 二 ELRjJ, 从 而 显 
然 地 得 到 ELRnw+ij/t 收 伍 于 零 。 然而 Rywri 与 和 No+l 有 关 ， 及 
XXnw+t1 是 包含 点 i 的 更 新 区 间 的 长 度 ,因为 较 长 的 更 新 区 间 有 更 
多 的 机 会 包含 点 缚 (直观 上 )Xxwwo+i 趋 向 于 比 一 个 通常 的 更 新 区 间 
长 度 更 大 的 值 (见习 题 3)， 所 以 Ryow+1! 的 分 布 不 同 于 Ri 的 分 布 。 

到 目前 为 止 我 们 都 假定 在 更 新 循环 一 结束 时 就 立刻 得 到 酬 
劳 。 但 这 并 不 是 本 质 的 , 若 酬 劳 是 在 更 新 循环 期 间 逐 步 地 获得 的 ， 
定理 3. 6. 1 仍然 正确 。 为 了 明了 术 这 点 ， 以 尺 C) 记 到 上 时 所 得 的 酬 
邦 , 且 先 假 设 一 切 报酬 是 非 负 的 。 于 是 


N() 


R(z) 2 R, 


并 
一 二 RkR 
办 一 ] < 一 < 一 好 一 】 NGC) 十 1 
上 一 十 t 


由 于 


E LARww+i ，。 
i 
Nt) 


得 到 定理 3.6.1 的 (i)。 注 意 到 ， 由 证 明 中 的 论证 3》!R,/i 与 


Ni) 二 1 


27 Ru/t 都 收敛 于 严 [R]/E[X] ,从 而 得 到 定理 3.6.1 的 G)。 当 


一 劳 非 正 时 类 似 的 论证 也 成 立 ， 将 酬劳 分 为 正 部 与 负 部 ， 并 对 每 
一 部 分 各 自 运 用 以 上 论证 即 得 一 般 情形 的 结论 。 
例 3. 6Ca) 交错 更 新 过 程 。 对 于 一 个 交错 更 新 过 程 ( 见 3. 4. 1 节 )。 假 
设 系统 开 时 以 每 单位 时 间 为 1 的 比率 获得 报酬 (因此 一 次 循环 所 得 酬劳 等 于 
此 循环 中 开 的 时 间 )。 到 :时 所 得 的 总 的 酬劳 正 是 [0, :] 中 开 着 的 总 时 间 ， 
于 是 由 定理 3. 6. 1 得， 以 概率 1 
se 日 ] 。 


在 L0, 纪 中 开 着 的 时 间 、_” 忆 [X 
EL[X]+ ELY] 


其 中 X 是 一 个 循环 中 开 着 的 时 间 , 而 了 是 关 着 的 时 间 ， 再 由 定理 3.4. 4 知 ， 
当 一 个 循环 的 分 布 为 非 格 点 时 此 系统 开 着 的 极限 概率 等 于 长 时 间 后 开 着 的 
时 间 所 占 的 比率 。 

例 3. 6(b) 平均 年 龄 与 剩余 寿命 。 此 4(:) 记 一 个 更 新 过 程 在 时 刻 : 的 
年 龄 ， 假 设 我 们 感 兴趣 的 是 要 计算 

na 

为 此 假定 在 任何 时 刻 我 们 以 与 该 时 刻 更 新 过 程 的 年 龄 相等 的 比率 收 钱 , 即 在 
时 刻 * 以 比率 A(s) 收 到 酬金 ,所 以 | A(s)ds 表示 到 时 刻 : 我 们 的 总 收益 。 因 
为 每 当 一 次 更 新 发 生 ， 一 切 又 从 头 开始 ， 所 以 以 概率 1 


| 45d [一个 更 新 循环 中 的 一 劳 ] 
上 ”一 不 更 新 循环 的 时 间 ] 


现在 由 于 进入 一 个 更 新 循环 时 间 ; 之 后 , 更 新 过 程 的 年 龄 正 是 s, 所 以 我 们 有 
一 个 更 新 循环 中 的 酬劳 = | sds 一 邯 
其 中 XX 是 更 新 循环 的 时 间 。 因 此 ， 以 概率 1 有 
| | Aas EL[X’] 
tc i 2E[X | 
类 似 地 者 以 Y(z) 记 时 刻 i 的 剩余 寿命 ,那么 假设 我 们 以 与 该 时 刻 的 剩余 
寿命 相等 的 比率 获得 酬劳 便 可 计算 平均 剩余 寿命 . 由 定理 3. 6.1 剩余 寿命 的 


平均 值 为 
lim| Y Gs)ds/t 一 一 个 于 者 丽 政 沾 的 出 劳 ] 


_ ELX’| 
2E[X| 


于 是 年 龄 与 剩余 寿命 的 均值 相等 。 (为 什么 这 是 所 期 望 的 ?) 
量 XXNwti1 一 SNw+1 一 SNw 表 示 包 含 点 t 的 更 新 区 间 的 长 度 ， 因为 它 可 以 
表示 为 
入 w+I 一 4() 十 和 全 ) 
可 见 它 的 均值 为 
。g92 。 


_ E[X’] 
lim| Xvenas/t 一 ElX] 


因为 


ELX?] 


《等 式 仅 当 Var(X) 一 0 时 成 立 )， 可 见 Xnwdo+i 的 均值 大 于 ELXj]。 (为 什么 这 
并 不 令 人 惊奇 ?) 

例 3.6(ce) 假设 乘客 按照 一 个 更 新 过 程 来 到 一 火车 站 ， 其 平均 来 到 间 
隔 时 间 为 x。 每 当 有 N 个 人 在 车 站 上 等 待 时 ， 就 开 出 一 辆 火车 。 若 每 当 及 n 
个 乘客 等 待 时 车 站 就 以 每 单位 时 间 zc 元 的 比率 开支 费用 ， 且 每 开 出 一 辆 火 
车 要 多 开支 天 元 ， 那 么 此 车 站 每 单位 时 间 的 平均 费用 是 多 少 ? 

每 当 一 辆 火车 开 出 我 们 就 说 完成 了 一 次 循环 ,那么 上 述 过 程 是 一 更 新 酬 
劳 过 程 .一 次 循环 的 平均 长 度 是 来 到 NN 个 顾客 所 需 的 平均 时 间 , 而 因为 平均 
来 到 间隔 时 间 是 w， 所 以 它 等 于 

[循环 的 长 度 ] = Nw 
车 以 X, 记 一 次 循环 中 第 ”个 与 第 (x 十 1) 个 来 到 之 间 的 时 间 ， 则 一 个 循环 
的 平均 费用 可 表示 为 
E|[ 一 次 循环 的 费用 j] 
一 五 L[cX 十 2cXs 十 … 十 (CN 一 1)cXvw 十 天 


_ cuN(N— 1) 
2 
因此 平均 费用 是 


十 天 


No ,Kk 
2 Np 
3.6.1 排队 论 应 用 一 例 
假设 顾客 遵循 一 个 非 格 点 的 更 新 过 程 来 到 一 个 单个 服务 员 的 
服务 站 。 顾 客 一 来 到 ， 若 服务 员 空 着 则 立即 被 服务 ， 著 服务 员 忙 
着 则 排队 等 候 , 假 设 顾 客 的 服务 时 间 独 立 同 分 布 且 与 来 到 流 独 立 。 
以 入 ;， 入 >， … 记 顾客 来 到 的 间隔 时 间 ; MY!, Y;,, … 记 顾客 
依次 的 服务 时 间 。 我 们 将 假定 
(3. 6.1) E[Y,] < E[X,1]< ~ 
假设 第 一 位 顾客 在 时 刻 0 来 到 ， 且 以 a() 记 在 时 刻 上 系统 中 
。03。 


顾客 的 人 数 。 和 定义 
工 一 lim| nCs)ds/t 


为 了 证 明 工 以 概率 1 存在 且 为 常数 ， 我 们 设想 在 时 刻 * 所 获 酬劳 
率 是 n(s)。 奉 设 一 循环 对 应 于 一 忙 期 的 起 点 〈 即 每 当 一 个 来 客 发 
现 系统 空 着 就 开始 一 个 新 的 循环 ) , 则 容易 看 到 每 一 次 循环 过 程 都 
重新 开始 。 因 工 表示 长 时 间 后 的 平均 酬劳 ， 所 以 从 定理 3.6.1 得 
1 二 一 个 循环 中 的 副 劳 ] 


人 研一 个 循环 的 时 间 ] 
E| | nas | 
ELT] 
又 以 形 , 记 第 i 个 顾客 在 此 系统 中 花费 的 全 部 时 间 ， 且 定义 
Wo=lim 


为 证 明 W 以 概率 1 存在 , 设想 我 们 在 第 i 天 收 到 酬劳 W;。 因 为 每 
次 循环 之 后 排队 过 程 又 重新 开始 , 所 以 若 以 N 记 一 次 循环 中 受到 
服务 的 顾客 数 ， 那 么 W 是 一 个 更 新 过 程 的 单位 时 间 的 平均 酬劳 ， 
过 程 的 循环 时 间 是 入 而 一 个 循环 的 酬劳 是 Wi 十 … 十 Ww， 因而 
Ww 二 人 一 个 循环 中 的 酬劳 J 

一 个 循环 的 时 间 ] 

El > W, 

一 ENT 

我 们 应 注意 到 ,， 可 以 证 明 〈 见 第 七 章 命 题 7. 1. 1) (3. 6. 1) 蕴含 着 
E[IN]<o%, 


(3. 6. 3) 


下 述 定理 在 排队 论 中 是 十 分 重要 的 。 
定理 3.6.2 以 4= 1/ELX;] 记 来 到 率 ， 则 
L=AW 


证 明 ”我们 从 一 个 循环 的 长 度 T 与 此 循环 中 受到 服务 的 顾客 数 N 之 
间 的 关系 着 手 。 者 在 一 个 循环 中 个 顾客 受到 服务 , 则 下 一 个 循环 在 第 (十 
1) 个 顾客 来 到 时 开始 。 因 此 ， 
。94。 


T= Sx, 
现在 容易 看 到 N 是 序列 XX!，XX，,，… 的 一 个 停 时 ， 因 为 
N=n © Ki k=1, 2, ,nl 
且 XXi 十 … 十 XX, 之 YY 十 … 十 Y， 
于 是 {入 二 n}) 与 XX，Xn+z，… 独 立 ， 故 由 瓦尔 德 等 式 
ELT]=ELNJELX]= ELNJ/A 
所 以 由 (3. 6. 2) 与 (3. 6. 3) 得 
E| | 6) | 


但 设想 各 顾客 在 此 系统 中 时 以 每 单位 时 间 1 元 的 比率 付款 (所 以 第 ; 个 顾客 
所 付 总 数 正 是 W;)， 可 见 


站 we- Ww 一 一 个 钉 环 中 所 付 总 数 
因此 从 (3. 6. 4) 证 得 结论 。 
注 记 
(1) 定理 3. 6. 2 的 证 明 并 不 依赖 于 我 们 所 假定 的 特殊 排队 模 
型 。 此 证 明 可 不 作 改 变 地 适用 于 任何 有 如 下 特性 的 排队 系统 ， 该 
系统 包含 着 在 概率 上 过 程 重 新 开始 的 时 刻 ， 且 这 样 的 循环 之 间 的 
平均 是 有 限 的 .例如 , 若 在 我 们 的 模型 中 假设 有 A 个 服务 员 , 则 可 
以 证 明和 平均 循环 时 间 有 限 的 一 个 充分 条 件 是 
ELY, |<EAELX, | 及 PI{Y,<X,}>0 
(2) 定理 3.6. 2 说 
在 “系统 ”中 (按时 间 的 ) 平 均 人 数 
二 4。( 一 个 顾客 在 “系统 ”中 度 过 的 平均 时 间 ) 
以 “队伍 ”替换 “系统 ”, 同样 的 证 明 得 
在 排队 的 平均 人 数 
二 4，( 一 个 顾客 在 排 着 的 队伍 中 度 过 的 平均 时 间 ) 
或 以 “服务 ”替换 “系统 ”我 们 就 有 
在 一 次 服务 中 的 平均 人 数 二 AE[Y] 


(3. 6. 4) L=AW 


ea On, 


3.7 再 生 过 程 


考虑 状态 空间 为 40, 1,2,…? 的 一 个 随机 过 程 {XX() ,i 之 0)， 
它 具 有 这 样 的 性 质 ， 存在 着 一 些 时 刻 ， 过 程 在 这 些 时 刻 在 概率 上 
又 重新 开始 ， 即 假设 以 概率 1 存在 一 时 刻 $; 使 得 $: 之 后 过 程 的 
继续 在 概率 上 是 从 时 刻 0 开始 的 全 过 程 的 复制 。 注 意 到 这 性 质 纺 
含 着 还 存在 时 刻 S，，S;，… 它 们 与 $1 有 同样 的 性 质 。 这 样 的 随机 
过 程 称 之 为 再 生 过 程 。 
从 上 可 得 ss，… 上 构成 一 个 更 新 过 程 的 事件 发 生 的 时 刻 。 
每 当 发 生 一 次 更 新 ， 我 们 就 说 一 个 循环 完成 。 以 NG 一 max {n: 
9, 委 引 记 到 时 刻 上 循环 的 个 数 。 
下 列 重 要 定理 的 证 明 进 一 步 显示 了 关键 更 新 定理 的 威力 。 
定理 3.7.1 若 一 个 循环 的 分 布 F 在 某 区 间 上 具有 和 密度， 有 量 
车 El[S,] < ~~,， 则 
， EE[ 一 个 4 太 j 的 
P= limP (XG) 一 小 一 一 直下 从 蒜 的 后 而 
证 明 令 PQ)=P{X()==j}。 对 i 之 前 最 后 一 个 循环 的 完成 时 刻 取 条 
件 得 
PO) = P{XC) = jlSnew = 0jFCD + | PIXG) = JSwo = Fe — sydm(s) 
今 有 
P{X()=j|Sww =0}=P{X()=j|S1>1) 
P{X()=j|Snw—=s}=P{(XG—s)=i|S1>t—;} 
于 是 
PO=PIXO=j S10) +| PIX G5)=j,51>t—s}dm(s) 
由 于 可 以 证 明 hQ) 寺 P(XQ)= 二 7,S1 交 t} 是 直接 歼 曼 可 积 的 ,所 以 由 关键 更 新 
定理 可 得 
PO 一 | P(X =j,S St}dt/ELS,] 
今 设 
。96 。 


1 ， 尊 庆 人) 一 1 全 上 

0， 其 它 

则 “rode 代 表 着 首次 循环 中 X CD) 一/ 的 时 间 。 因 为 
2 =| ELTG)]d 


=| PIG 一 六 So)d 
D 


TO=| 


故 结论 成 立 。 

例 3.7(a) ”顾客 按 更 新 过 程 来 到 的 排队 模型 ， 顾 客 按 更 新 过 程 来 到 的 
排队 过 程 (如 3.6 节 中 的 那样 ) 多 数 是 再 生 过 程 ,每 当 一 个 来 到 的 顾客 发 现 系 
统 是 空 着 的 ,一 个 循环 便 开始 。 例 如 在 顾客 按 更 新 过 程 来 到 的 单 服务 员 的 排 
队 系 统 中 ,时 刻 ? 系统 中 的 人 数 X() 构 成 一 个 再 生 过 程 ,倘若 第 一 个 顾客 在 
:一 0 时 来 到 (否则 它 是 一 个 延迟 的 再 生 过 程 ,而 定理 3. 7. 1 仍然 有 效 )。 

从 更 新 一 劳 过 程 的 理论 知 P; 也 等 于 长 时 间 后 立 (2) 二 7 所 占 
的 时 间 的 比率 。 事 实 上 ,我 们 有 下 列 。 

命题 3.7.2 对 于 ELS1]<o20 的 再 生 过 程 ,以 概率 1 


1 9 人 中 处 于 了 的 时 间 - ~- -全 一 个 循环 中 处 于 了 的 时 间 ] 
oo 五 [ 一 个 循环 的 时 间 ] 


证 明 ”假设 每 当 过 程 处 于 状态 7 时 以 比率 1 获得 酬劳 。 这样 生 成 一 个 
更 新 酬劳 过 程 ,日 从 定理 3.6. 1 直接 得 证 本 命题 成 立 。 
3.7. 1 对 称 随机 游 动 与 反正 弦 律 
设 六 7，… 独 立 同 分 布 且 


P{Z=1} 一 PP 也 一 一 1) 一 六 
定义 
Zoo 一 0， 2 一 > 7 
过 程 (Z,,n 之 0) 称 为 对 称 随机 游 动 过 程 。 


若 我 们 定义 
0， 车 2,==0 
| 1， 车 Z,>0 
一 1， 和 看 .<0 
. 97 . 


则 (ZX,,n 宇 让 是 一 个 再 生 过 程 ,每 当头, 取 值 0 时 过 程 再 生 。 为 了 
得 出 这 个 再 生 过 程 的 一 些 性 质 ,我 们 先 研 究 对 称 随机 游 动 {:Z,,n 过 
0}。 


令 
2 f 2n 
us= PlZs,=0})= " 去 | 
n 
且 注 意 到 
2n—1 
(3.7.1) w= 7 ze 


我 们 回想 一 下 ,从 第 一 章 例 1. 5(d) (选票 问题 的 例子 ) 的 结果 
可 得 ,在 对 称 随机 游 动 中 ,在 时 刻 2n 首次 到 达 0 的 概率 表达 式 为 
2n 1 如 
”| [ 读 | 
2n—1 
zn 
我 们 将 需要 下 列 引 理 ; 它 说 明 对 称 随机 游 动 在 时 刻 2z 处 于 状 
态 0 的 概率 ,也 等 于 此 随机 游 动 到 时 刻 2n 尚未 击 中 0 的 概率 。 
引 理 3.7. 3 
P{Z 天 DZ 和 0 … 2 天 0 一 zt 
证 明 从 (3.7.2) 可 见 
P(Zi 天 0Zoz0j=I 一 人》 二 
因此 我 们 必须 证 明 
(3. 7. 3) us=1— > 


£=1 
我 们 将 按 x 归纳 进行 证 明 。 当 ”一 1 时 , 因 w 一 广 , 上 式 成 立 。 所 以 假设 
(3.7. 3) 对 一 1 成 立 。 现 在 
Ea nn—1] 
We AN Wk Wn 
1 于 一 1 一 他/ 统一 蕊 和 1 


k=1 


(3. 7， 2 ) P{Z1A#0 A yan 1 天 0 ,Zan 一 01 二 


2k—] 


un (由 归纳 法 假设 ) 
= (由 (C3. 7. 1)) 
和 O08% 站 


2n 


nH 
利用 斯 特 林 近似 公式 (xn! 一 me "V27) 得 
(2 e “V2r_ 1 


二 


ntie™2n (om) 2 /in 
从 而 n 习 2 时 ww0。 于 是 从 引 理 3.7.3 可 见 以 概率 1 对 称 随机 游 
动 要 返回 原点 。 

下 一 命 题 给 出 直到 (包括 ) 时 刻 2 为止 最 后 一 次 到 达 0 的 时 
刻 的 分 布 。 

命题 3. 7. 4 

对 & 一 0,1，…:7， 

PiZa—=0,2L2r1F 0 02 天 0 22 天 0 一 Mt 
征明 
P (Za 一 0,Zo1 天 0 Z2 天 0 
一 忆 1Za 一 OPUZoI 天 0 Za 天 0|172 一 0) 

其 中 用 了 引 理 3. 7. 3 去 计算 上 式 右 端 的 第 二 项 。 

我 们 现在 已 作 好 准备 讨论 主要 结果 :如 用 直线 连接 2Z 与 
Lk+1 ; 绘 出 对 称 随 机 游 动 ( 起 始 于 Zo 一 0, 园 图 3.7.1), 则 到 时 刻 2n 
过 程 有 24 个 单位 时 间 为 正 而 24 一 2 个 单位 时 间 为 负 的 概率 与 命 
题 3. 7. 4 中 给 出 的 概率 相同 。' 对 图 3. 7. 1 中 所 示 的 随机 游 动 的 样 
本 路 径 , 前 8 个 单位 时 间 中 有 6 个 为 正 ,2 个 为 负 。) 

定理 3.7.5 以 ,x 记 到 时 刻 2n 对 称 随机 游 动 有 2k 个 单位 
时 间 为 正 及 2n 一 2& 个 单位 时 间 为 负 这 一 事件 , 令 oo 一己 CE)。 
则 
(3.7.4) brs — Wurth 

证 明 对 n 用 归纳 法 。 因 为 


*99. 


图 3.7.1 随机 游 动 的 一 个 样本 路 径 


2 一 六 ,1 一 


uo 二 1， Wl 


1 
2 重 
得 4 二 1 时 (3.7.4) 是 对 的 。 所 以 假定 54m 二 wm-t 对 一 切 使 得 mx 过 n 的 mm 成 
立 。 为 证 (3.7. 4) 我 们 首先 考虑 有 一 对 的 情形 。 对 首次 回 到 0 的 时 刻 工 取 条 件 
得 
b= DP{E,a|T=2r}P{(T=2r}+P{E,|T>2n}P{T> 2n) 
给 定 人 = 2r ,随机 游 动 在 时 刻 27r 首次 为 0 而 在 (0,2r) 中 总 是 正 或 总 是 负 是 等 
可 能 的 。 因 此 ， 
P{E,,|T=27)=6, ,, /2， P{E.,lT>2n)= 坟 


从 而 
bn= 坟 Db PT=2r}+ 志 P{T>2n) 
r 一 ] 


= Du PIT=2r) + 3P{T>2n) 
r=] 


其 中 的 最 后 一 个 等 式 5,_,,。_: 二 ww_vuo; 由 归纳 法 假设 而 得 。 现 在 


Du PIT=2r}= 2 P{Z»-» =0;P{T=27) 
rr 二 ) r= 二 1 


= > P{Zn=0|T=2r}P{T= 27) 
7 一 1 


— tin 
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从 而 
1 1 


bn,n = Fut sg PT>2ni 
到 十 二 xm 〈 据 引 理 3.7. 3) 


因 此 (3.7.4) 对 =n 成 立 , 且 事实 上 由 对 称 性 &=0 时 (3.7.4) 也 成 立 。 
《3.7.4) 对 0 二 <<n 成 立 可 用 类 似 的 证 法 。 再 对 TT 取 条 件 得 


br = SPp{E,, IT=2r}P{T= 2r) 
给 定 T==27r, 而 随机 游 动 在 (0,2r) 中 总 是 正 或 总 是 负 是 等 可 能 的 ,因此 要 多 


发 生 , 从 时 刻 27 到 2n 的 延 拓 在 前 一 情形 将 有 2 一 2r 个 正 单位 而 在 后 一 情形 
需 2 个 。 因 此 


brn= 训 Db PIT=27)}+ 序 Db ,PIT—27) 
r 一 1 Tr 二 1 


一 六 加 > ， up (了 一 27} 十 去 2 ur {T= 2r] 
其 中 最 后 的 等 式 由 归纳 法 假设 而 得 。 因 为 
DP{T=2r} =u 


> Uni {T= 27} Wk 
一 | 


一 Tt 
证 毕 。 
定理 3. 7. 5 给 出 的 概率 分 布 , 即 
PIX=2k}=uuni 
称 为 离散 的 反正 弦 分 布 。 我 们 之 所 以 这 样 称 呼 , 是 因为 当 & 与 2 很 
大 的 ， 由 斯 特 林 近似 公式 有 


TREE 天 人 


1 
TVE (7 一 下 ) 
因此 对 任意 的 zx, 0 二 zx 二 1， 可 见 对 称 随机 游 动 在 (0,2n) 中 为 正 的 
时 间 所 占 比 例 小 于 的 概率 为 
。 101， 


(3.7.5) > .| dy 
。 1 . ZL 
1 上 £* ~ Xx), fy (n—Yy) 
-| 1 ow 
”二 一 | 一 一 一 一 一 ( 一 ) 
Xo Vw (lw) 取 w=y/n 
一 全 arcsin As 


从 上 可 见 , 当 很 大 时 , 在 前 2n 个 单位 时 间 中 对 称 随机 游 动 
为 正 的 时 间 所 占 比 例 渐 近 服从 由 (3. 7. 5) 给 出 的 反正 弦 分 布 。 例 


如 ， 为 正 的 时 间 少 于 一 半 的 概率 是 (2/z)arcsin 1-1. 


上 述 定理 的 一 个 有 趣 的 推论 是 ， 它 告诉 我 们 对 称 随 机 游 动 为 
正 的 时 间 所 占 比 例 不 收敛 于 常数 值 1/2 (因为 , 不 然 的 话 此 极限 分 
布 就 不 是 反正 驴 律 而 是 常 值 随机 变量 的 分 布 了 )。 因 此 如 果 我 们 考 
虑 再 生 过 程 {X,) , 它 跟踪 着 对 称 随机 游 动 的 符号 , 可 得 X, 等 于 1 
的 时 间 所 占 比 例 肯定 不 收敛 于 某 个 常数 。 另 一 方面 ， 由 对 称 性 及 
nco 时 ww 一 0， 显 然 得 w>co 时 


P{X,= 1;) = P{Z.>> 0} 一 上 


上 述 事 实 ( 一 个 再 生 过 程 处 于 某 个 状态 的 极限 概率 不 等 于 长 
时 间 后 它 处 于 该 状态 的 时 间 所 占 的 比例 ) 不 成 为 一 个 矛盾 的 原因 
是 一 个 循环 时 间 的 期 望 为 无 限 的 ， 即 对 称 随机 游 动 相继 到 达 状 态 
0 之 间 的 平均 时 间 
E[T|]|= co 
上 式 必 定 成 立 ,否则 我 们 将 会 有 秘 慎 。 它 也 可 直接 从 引 理 3. 7. 3 得 
证 ， 因 为 


五 [了 = > PIT> 2n} 
本 0 


= jw 《由 引 理 3.7. 3) 
又 由 汉 一 CVnr)-! 可 见 
。 102。 


注 记 从 命题 3. 7.4 及 斯 特 林 近似 公式 可 得 当 0<z<1 且 ?7 
很 大 时 有 


P{ 在 2az 与 22 之 间 无 零点 } 一 1 一 > za 


其 中 最 后 的 近似 式 从 (3. 7. 5) 而 得 。 


3.8 平稳 点 过 程 


一 个 具有 平稳 增 量 的 计数 过 程 {N (7) ,i 之 0} 称 为 平稳 点 过 
程 。 由 定理 3. 5. 2 我 们 注意 到 ， 平 衡 更 新 过 程 是 平稳 点 过 程 的 一 
个 例子 。 

定理 3.8.1] 对 任 一 平稳 点 过 程 , 除 对 一 切 上 之 0,PUN (GO) 三 


; 一 1 的 不 足 道 EY 有 
(3. 8. 1) nD 


lim 
其 中 不 排除 4= ce。 
证 明 邻 f() 二 P{NG) >>0) 且 注意 到 fG) 非 负 不 减 ， 又 
f(s 二 +1) 二 PING 十 一 NOG) 盖 0 或 N(s) > 0) 
PING+E) — NG)> 0} + PIN(G) > 0)} 
= f(t) 十 f(s) 


一 4 之 0 


因此 
fw <2f[ | 


目 由 归纳 法 可 得 ， 对 一 切 z=1，2，… 
f0) nf (/n) 
设 4 使 得 fla) > 0， 则 对 一 切 n=1，2,，… 


f(a) 一 Cam) 
(3. 8. 2) < 2 
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现 定义 4= limsupf(2)/t 。 由 (3.8,2) 得 
4 之 六 2 >>0 


为 证 明 1 一 limf(z)/t， 考 虚 两 种 情形 , 首先 假设 *<oo。 此 时 固定 e>0, 设 
s>0 使 得 f(5)/s > 一 ee 。 对 任意 的 :+ € 《0,s) 存在 一 个 正 整数 nx， 使 得 
si 


从 7GD) 的 单调 性 及 (3. 8. 2) ， 对 此 区 间 中 的 一 切 上 有 

f (2) fl/n) nl1 /fCG/n) nm]1 f(s) 
SoD FFD a sa 
因此 


> *— lia e) 


f(D) 、 半 一 
i n 
既然 e 是 任意 的 ， 且 10 时 有 n>co， 得 limy (2)/t 一 4。 
现在 假定 =c=e， 此 时 固定 任意 大 的 4>>0,， 选 取 * 使 得 Js)/s > 4。 由 
《3. 8. 3) 对 一 切 E (0,s) 有 


n RY 


这 2 一 4 
n 
此 式 蕴 含 limy (2)/s 一 co，, 证 毕 。 
例 3.8(a) 对 于 平衡 更 新 过 程 ， 
P{NG)>>0}= F.C() 
一 | Fopaymn 
因此 ， 用 洛 比 达 法 则 得 


4 一 lim 一 - 
一 0 te 天 天 


所 以 ， 对 于 平衡 更 新 过 程 ，4 是 更 新 过 程 的 速率 。 
对 任 一 平稳 点 过 程 {NG),t 宇 0; ， 有 
EL[LNG+s) ] = EL[ING++ ss) — NG)] + ELNG)] 
= ELNGQ) | ELN (Gs)] 


P{IN(D) >0}) _ jor FU) 1 
t 


故 有 某 个 常数 c 使 
ELNG)]= «a 
c 与 4 之 间 有 什么 关系 呢 ?( 在 平衡 更 新 过 程 的 情形 ， 从 例 3. 8(a) 
* 1 04。 


及 定理 3.5. 2 得 4=c==1/p。) 一 般 地 ， 我 们 注意 到 
一 nP{N 一 7 
c= 5 { (2 b 


如一 了 


CO P{N(t)= nn)} 
> 2 一 一 一 


_ PING)> 0) 
t 


所 以 得 c 关 4。 为 确定 何 时 c<= 王 4， 我 们 需要 和 焉 述 概念 ， 平 稳 点 过 程 
称 为 正则 的 或 有 序 的 ， 乔 
(3. 8. 4) P{ING) 之 2} = 00) 
应 注意 到 ,对 于 一 平稳 点 过 程 (3. 8. 4) 蕴 含 着 在 任意 时 刻 同 时 
发 生 两 个 或 多 个 事件 的 概率 是 0。 为 了 明了 这 点 ， 把 区 间 L0,1j 分 
为 个 相等 的 部 份 ， 事件 同 时 发 生 的 概率 小 于 在 
7 7 十 1 
中 的 任 一 区 间 中 发 生 两 个 或 更 多 的 事件 的 概率 ， 后 者 小 于 nP{N 
(1/n) 宇 2} ,而 由 (3.8.4) 当 nn 一 oo 时 它 趋 于 0。 当 cc 二 oo， 道 命 题 
亦 真 , 即 任何 平稳 点 过 程 , 知 < 有 限 且 多 个 事件 同时 发 生 的 概率 是 
零 ， 则 必 是 正则 的 ， 其 证 明 更 为 复杂 ， 不 再 给 出 。 
将 对 正则 平稳 点 过 程 证 明 c==4 以 结束 本 节 。 此 即 柯 罗 留 克 定 
理 。 
柯 罗 留 克 定 理 ”对 于 一 正则 平稳 点 过 程 ， 每 单位 时 间 事 件 发 
生 的 平均 数 c 与 (3. 8.1) 和 定义 的 强度 4 相等 。 不 排除 4=c 王 ce 的 情 
证 明 定义 下 列 记号 ; 
4 为 事件 {N() 二 Ri; 
5 从 |N[ 二 (如 > 


n—] 
B, = U B,,;; 
j= 


7 -一 0,1,2,."* ,nn —1] 


NA)>LND -NT = 人 


n n 


Cw 为 事件 1N 


设 e 汪 0 及 正 整 数 x 给 定 ， 从 所 假设 的 过 程 的 正则 性 可 知 对 一 切 充 分 大 
的 


P(B,) < ni 二 个， 7=0,1,.…,n—1 
因此 
村 一 1 
E 
P(B,) PB%) 入 元 二 
所 以 
《3. 8. 5) P(A) = POAB,) 十 已 (4.5.) 
二 [3 
P(AiB,) 十 万 -二 


其 中 B, 是 B 的 余 集 ， 然 而 稍 加 思索 可 得 
4 ~ UCwB, 
因此 
P(A,B,) < S pC) 
这 连同 (3. 8.5) 准 合 了 对 一 切 充分 大 的 7 有 
(3.8.6 DP ) 委 5 Src +e 


1 二 此 = 


下 一 ] 。 
-ol -> 
天 } n 


Lt 


和 14 十 2e 
因 (3. 8.6) 对 一 切 m 成 立 ， 故 得 
> Pd < 4+ 2e 
因此 
c= EIN(D]— DPIN(D >&) - 2p < 1 十 2e 


k=0 二 


由 于 se 是 任意 的 且 早 已 知道 < 这 人 ， 结 论 得 证 。 
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习 是 


1. 下 列 命题 是 否 正确 : 

(a) NGQ)<n 当 且 仅 当 3 万 
(b) NOs 委 2 当 且 仅 当 5S, 宇 1? 
(CC) NGQ)>n 当 且 仅 当 S, 达 1? 

2. 在 定义 一 个 更 新 过 程 中 我 们 假设 来 到 间隔 为 有 限 的 概率 下 (co ) 等 于 1. 知 
Poco)<1, 那 么 在 每 次 更 新 之 后 以 正 概率 1 一 下 (ce ) 不 再 有 别 的 更 新 。 证 
明 : 当 Fece)<1I 时 更 新 的 总 数 , 记 为 Neco) ,使 得 1 十 Nece) 有 几何 分 布 ， 
均值 为 17 和 4 一 下 (ce))。 

3. 用 语言 表述 随机 变量 Xwe+i 代 表 什 么 。 (提示 : 它 是 哪个 更 新 区 间 的 长 
度 ?) 证 明 

PiXNnwtl 之 工 ) 之 F(x) 
当 F(z) 二 1 一 e “时 ， 精 确 地 计算 上 式 的 左 端 。 
4. 证 明 更 新 方程 


m(t) = 了 (人 ) 十 | mc — XT)adF (zr) 
0 


5. 随机 变量 XX， …， 义 ， 称 为 可 交换 的 ， 车 记 ， t2» ***， 是 1， Ce 2 的 
一 个 置换 ， 则 X ，…，X, 与 Xi ，-…，X, 有 相同 的 联合 分 布 ， 也 就 是 , 车 
已 t 人 1 TX TT 是 (zi, z mm) 的 一 个 对 称 洋 数 ， 则 
它们 是 可 交换 的 。 以 X;，X。，… 记 一 个 更 新 过 程 的 来 到 间隔 。 

(a) 证 明 : 在 NC) 一 2 的 条 件 之 下 Xi，…X,。 是 可 交换 的 。 又 XX1，… ,六 ，， 
有 + 是 可 交换 的 吗 (在 NG = nn 的 条 件 之 下 )? 
(b) 用 (a) 证 明 : 对 ?>>0 


本 | Xt Xu 


Na) NC) = |= ELX1| NG) 一 要 


《c) 证 明 : 


E| 2 十 … 十 从 Na) 
NU) 


6. 考虑 一 个 单 服务 员 的 银行 , 可 能 来 的 顾客 按 参数 为 的 泊 松 过 程 来 到 , 但 
仅 在 他 们 来 到 时 服务 员 有 空 的 情况 下 才 进 入 银行 .以 G 记 服 务 时 间 分 布 。 
”107。 


NG 全 0 |= 匹 [X | X, =i] 


(a) 顾客 进入 银行 的 速率 是 多 少 ? 
(b) 多 少 比 例 的 潜在 的 顾客 进入 银行 ? 
(c) 服务 员 的 忙 期 占 时 间 的 多 少 比 例 ? 

7. 设 XI，X，… 独 立 同 分 布 ， 下 LX<c。 又 设 Ni1，N;，… 独 立 同 分 布 且 
是 序列 和 ， 且 ，… 的 停 时 ,ELN]j<ce。 序 贯 地 观察 和， 在 Ni 停止 。 然 
后 在 余下 的 X; 中 取样 (做 法 好 像 取样 恰 从 Xw; + 开始 一 样 ) ,再 观察 N; 个 
后 停止 。 (于 是 例如 ， 六 十 … 十 XXw 与 XN 十 “十 XN +w, 同 分 布 )。 现在 
再 在 剩 下 的 X; 中 取样 〈 做 法 又 好 像 取 样 刚 开始 一 样 ) 再 观察 Ns 个 后 停 


止 ， 等 等 。 
(a) 令 
N] NI +N, Ni 十"… 十 Ni 
Sd] 一 人 > Xi， S, 一 了 >， Ai ” Dn 一 >, 人 X， 
f=] 一 人 十 1 ;一 Ni 十 … 十 No 1 十 1 
用 强大 数 定律 计算 
i | 各 二 | 
mo Ai 十 十 人。 
(b》 记 
Si 二 十 Sm SI 二 十 Sn pn 
AN 十 … 十 和 N。 nm 入 十 -一 二 NN， 


对 (a) 中 的 极限 导出 另 一 表达 式 。 
(c) 将 两 种 表达 式 列 成 等 式 而 得 瓦尔 德 等 式 。 

一 位 矿工 困 于 一 矿井 中 , 此 矿井 有 三 道门 。1 号 门 引导 他 经 两 天 的 行程 获 
救 脱 险 ; 2 号 门 引导 他 经 四 天 的 行程 又 回 到 这 矿井 中 ; 3 号 门 领 他 经 八 天 
的 行程 又 回 到 这 矿井 中 。 假设 在 任何 时 刻 他 等 可 能 地 选择 这 三 道门 之 一 ， 
且 以 了 记 矿 工 获救 脱险 所 用 的 时 间 。 
la) 定义 一 列 独立 同 分 布 随 机 变量 Xi ，X:，… 及 一 停 时 N 使 得 


~N 
T= 2X, 
5 一 ] 


注意 :你 可 以 设想 即使 到 达 安 全 地 后 矿工 仍然 继续 随机 地 挑选 门 ， 
(b) 用 瓦尔 德 等 式 求 EL7]。 


(c) 计算 E[ Ox. |N=n | 且 注 意 到 它 不 等 于 E[ x,]. 


(d) 利用 (c) 再 次 推导 出 E[T]。 
9. 表明 如 何 从 关键 更 新 定理 推出 布莱克 威 尔 定理 。 
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10， 


11. 


12. 


13. 


14. 


一 个 过 程 处 在 个 状态 1, 2,，…, n 之 一 。 最初 它 处 于 状态 1, 停留 在 该 

状态 的 时 间 有 分 布 F,。 离 开 状 态 1 后 它 到 状态 2， 在 那儿 停留 的 时 间 有 

分 布 F。 离开 2 后 它 到 状态 3, 等 等 。 从 状态 4 它 回 到 1, 且 再 从 头 开始 ， 
limP{ 在 时 刻 + 过程 处 于 状态 站 

假设 进 到 状态 1 之 间 的 时 间 的 分 布 H 是 非 格 点 的 且 均 值 有 限 。 

以 AQ) 与 YQ) 记 一 个 更 新 过 程 在 时 刻 t 的 年 龄 与 剩余 寿命 。 填 空 : 

(a) 4A() >z 电 在 。 区 间 中 没 发 生 事件 ? 

(YG) >z 马 在 区 间 中 没 发 生 事件 ? 

(c) PIY(1) >zx}= P{AC( )> }。, 

(d) 对 泊 松 过 程 计算 4() 与 YG) 的 联合 分 布 。 

以 AQ) 与 YQ) 分 别 记 在 时 刻 : 的 年 龄 与 剩余 寿命 。 求 : 

(a) PIYQG) > zx|AQ) = s}, 


(b) P{YG) > za 人 十 到 = 了 |. 

(c) 对 油 松 过 程 求 已 (了 (G) 记 并 4 十 z) 了)。 

(d) P{(YQ) > 17,AG) > y}. 

le) 者 y= ， 证 明 ， 以 概率 1，t->oo 时 4A(1) /~0。 
考虑 一 个 更 新 过 程 , 其 来 到 间隔 分 布 是 参数 为 (n,2) 的 厂 - 分 布 ,。 利 用 命题 
3.4.6 证 明 : 


nl 
24 


limE[Y (4)] 一 
解释 为 何 可 以 不 作 任 何 计算 而 得 上 式 。 
一 个 形 为 

g(t) = ht) 十 | sc — wadF(z) 


的 方程 称 为 更 新 型 方程 。 用 卷 积 记 号 可 记 为 
g=h+i+gx*F 
将 上 式 释 代 或 用 拉 普 拉 斯 变换 证 明 : 更 新 型 方程 有 解 


g(t) = ht | ac 一 ZJ)dzz( 工 ) 
其 中 mm(Cz) = Fz) 。 董 有 直接 黎 曼 可 积 ， 生 FF 非 格 点 、 均 值 有 限 ， 
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158. 


16. 
17. 


18. 


则 运用 关键 更 新 定理 可 得 
| a 


limg(t) = 二 
TT | Fl dr 
对 过 程 在 概率 上 重新 开始 的 时 刻 取 条 件 可 得 gC) 的 更 新 型 方程 .对 以 下 
函数 建立 更 新 型 方程 。 
Ca) PO) ,一 个 交错 更 新 过 程 在 时 刻 t 是 开 着 的 概率 。 
(b) g(t) 一 LA()」]」， 一 个 更 新 过 程 在 时 刻 t 的 年 龄 的 期 望 。 
应 用 关键 更 新 定理 求 (a) 与 (b) 中 的 极限 值 。 
在 习题 6 中 假设 顾客 按 更 新 过 程 来 到 ， 来 到 间隔 分 布 为 。 若 一 个 事件 
对 应 于 一 个 
(a) 走 进 银行 的 顾客 ， 
(b) 离开 银行 的 顾客 ， 
到 时 刻 :事件 的 个 数 将 构成 一 个 (可 能 是 延迟 的 ?更 新 过 程 吗 ? 车 
是 指数 分 布 结果 怎样 ? 
证 明 方 程 (3. 5. 3) 。 
考虑 接连 地 投掷 一 均匀 硬币 ， 以 再 与 工分 别 记 正 面 与 反面 。 
(a) 计算 直到 花样 HHTHHTT 出 现 的 平均 投掷 次 数 。 
(b) HHTT 或 HTHT， 哪 一 个 花样 出 现 的 平均 时 间 更 长 ? 
考虑 一 个 延迟 更 新 过 程 {Np(z),t 宇 0}, 其 第 一 个 来 到 间隔 分 布 为 G, 而 
其 它 来 到 间隔 分 布 为 F。 令 p(t) = EL[NDp(2)]。 
(a) 证 明 : 


mp(t) = GC) + | mc 一 过 )CGCz) 
， 0 
其 中 mm 人 ) 二 > F,0)， 
好 一 二 


Cb) 以 4oCe) 记 时 刻 : 的 年 龄 证明: 若 下 不 是 格 点 的 , | radF(z) < oo 
且 z 上 一 co 时 忆 (G 的 一 0， 则 


| zdF (xz) 
0 


EL ApQ)] YT 
2| xaF(lr) 
0 


《c) 证 明 : 着 G 有 有 限 均 值 ， 则 1 一品 时 :GG) 一 0。 
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对 更 新 语 劳 过 程 证 明 布 莱克 威 尔 定 理 ， 也 就 是 ， 假 设 循环 分 布 不 是 格 点 


的 ， 证 明 tco 时 

E[ 在 (ot 十 a) 中 的 酬劳 ] 一 a 全 个 全 的 有 全 
假定 每 个 有 关 的 函数 都 是 直接 黎 曼 可 积 的 。 
对 更 新 酬劳 过 程 证 明 


im 万 [RRwo+a ] = 


ELRIX, | 

ELX,] 

假定 X; 的 分 布 不 是 格 点 的 , 而 且 每 个 有 关 的 函数 都 是 直接 黎 曼 可 积 的 。 

当 循环 的 酬劳 定义 为 与 循环 的 长 度 相等 时 ， 上 式 导 至 

ELX?] 

ELX] 

除非 X 以 概率 1 是 常数 ， 上 式 总 是 大 于 五 [X] (为 什么 ?)， 

在 例 3.6(c) 中 假设 来 到 的 更 新 过 程 是 泊 松 过 程 ， 来 到 间隔 的 均值 为 x。 

每 当 有 N 个 乘客 等 待 时 就 开 出 一 列 火 车 , 以 N * 记 使 长 时 间 后 的 平均 费 

用 最 小 的 入 值 . 另 一 类 决策 是 每 了 个 单位 时 间 开 出 一 列 火车 。 计算 在 这 

种 决策 下 的 长 时 间 后 的 平均 费用 , 且 以 T' 记 使 它 最 小 的 了 了 值 . 证明 :每 

当 有 NN ' 个 顾客 等 待 时 开 出 火车 的 平均 费用 小 于 每 T* 个 单位 时 间 开 出 

火车 的 平均 费用 。 

一 辆 小 汽车 的 寿命 是 分 布 为 F 的 随机 变量 。 当 汽车 损坏 或 用 了 4 年 时 ， 

车 主 就 以 旧 换 新 。 以 RCA) 记 一 辆 用 了 4 年 的 旧 车 的 卖 出 价格 。 一 辆 损 

坏 的 车 没有 任何 价值 . 以 Ci 记 一 辆 新 车 的 价格 , 且 假 设 每 当 车 子 损坏 时 

还 要 额外 承担 费用 C。。 

(a) 每 当 购 置 一 新 车 时 就 说 一 个 循环 开始 ,计算 长 时 间 后 的 单位 时 间 的 
平均 费用 。 

(b) 每 当 使 用 中 的 汽车 损坏 时 就 说 一 个 循环 开始 , 计算 长 时 间 后 的 单位 
时 间 的 平均 费用 。 

注意 : 不仅 在 Ca) 中 而且 在 (b) 中 都 要 你 计算 一 个 循环 中 的 平均 费用 与 一 
个 循环 的 平均 时 间 之 比 。 当 然 ，(a) 与 (b) 的 答案 应 当 是 同样 的 。 

考虑 一 个 单 服务 员 的 排队 系统 ， 具 有 参数 为 4 的 泊 松 来 到 而 服务 时 间 分 

布 G 具有 均值 ke。 假设 hp 二 1。 

《a) 求 系统 是 空 的 时 间 所 占 比 例 己 , 。 

(b) 当 系 统 不 空 时 就 说 系统 正 忙 着 (所 以 服务 员 正 忙 着 ), 计算 一 个 入 期 

°。 lill* 


lmELXNw +] 一 


24. 


25. 


26. 


27. 


的 平均 长 度 。 
(c) 利 用 (b) 及 瓦尔 德 等 式 计 算 在 一 个 忙 期 中 受到 服务 的 顾客 的 平均 数 。 
对 于 3. 6. 1 节 的 排队 系统 ， 定 义 VG)， 时 刻 1 系统 的 工作 量 ， 为 在 时 刻 
i 系统 中 的 全 部 顾客 所 剩余 的 服务 时 间 之 和 。 令 
T 一 lim | V (yds/t 


又 以 D; 记 第 i 个 顾客 排队 等 待 所 用 去 的 时 间 ， 定 义 
Wo = lim(D: + «+ D,)/n 
(a) 论证 了 与 We 存在 ， 且 以 概率 1 为 常数 。 
(b) 证 明 恒等式 
V = aELY Wo + AELY? |]/2 
其 中 1/4 是 平均 来 到 间隔 时 间 而 Y 具有 服务 时 间 的 分 布 。 
举 反 例证 明 ， 在 站 个 服务 员 且 来 到 为 更 新 过 程 的 排队 模型 中 ， 条 件 五 
[LY] <kELXj] 并 非 是 循环 时 间 必 为 有 限 的 充分 条 件 , 其 中 Y 是 服务 时 间 
而 % 是 来 到 间隔 , (提示;: 给 出 一 例 , 在 第 一 个 来 到 之 后 系统 永远 不 空 。) 
包 于 依照 参数 为 ; 的 泊 松 过 程 来 到 一 邮寄 点 。 收 取 所 有 待 运 的 包 庄 的 卡 
车 的 来 到 遵循 一 个 具有 非 格 点 的 来 到 间隔 分 布 F 的 更 新 过 程 . 以 XQ) 记 
在 时 刻 t 等待 装 车 的 包 庄 个 数 。 
(a) { 关 (2) ,之 01 是 什么 类 型 的 随机 过 程 ? 
Cb) 求 ， 
limP{X (2) = 1}， z 之 0 
的 表达 式 。 
考虑 一 个 满足 定理 3. 7. 1 的 条 件 再 生 过 程 。 假 设 每 当 过 程 处 于 状态 7 就 
以 比率 xr(j) 得 到 报酬 . 若 一 个 循环 中 的 平均 酬劳 是 有 限 的 , 证 明 : 长 时 
间 后 单位 时 间 的 平均 酬劳 以 概率 1 为 
ji | Des 一 -> (7) 


t—oo 


其 中 P; 是 XQ) 等 于 7 加 析 限 概率 
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4 
马尔 可 夫 链 


4.1 引言 与 例子 


考虑 只 取 有 限 个 或 可 数 个 值 的 随机 过 程 {(X,n 一 0,1,2*…)。 
奉 不 另外 说 明 ， 过 程 可 能 取得 值 的 集合 将 以 非 负 整数 集 {0,1,2， 
来 表示 。 若 X, 二 i, 就 说 过 程 在 时 刻 n 处 于 状态 i 假设 每 当 过 
程 处 于 状态 i 则 在 下 一 时 刻 将 处 于 状态 j 的 概率 是 固定 的 Pj。 也 
即 假 设 对 一 切 状 态 io;i1，… ,in1 »19] 及 一 切 上 之 0 有 
(4.1.1) PP {X=j|X,=i,X, 1 =in Oi) 

=P,, 
这 样 的 随机 过 程 称 为 马尔 可 夫 链 。 方 程 (4. 1.1) 可 解释 为 ,对 马尔 
可 夫 链 ， 给 定 过 去 的 状态 Xo,Xi， … ,人 冬 ， -1 及 现在 的 状态 X， , 将 来 
的 状态 X,+1 的 条 件 分 布 与 过 去 的 状态 独立 ,只 依赖 于 现在 的 状 
态 ,这 称 为 马尔 可 夫 性 .P; 代 表 处 于 状态 i 的 过 程 下 一 步 转 移 到 状 
态 7 的 概率 。 由 于 概率 是 非 负 的 , 且 过 程 必须 转移 到 某 个 状态 ,所 
以 有 
P; 宇 0，i,j 宇 0; P=1, 1 一 0,] ,…， 


以 P 记 一 步 转移 概率 已 ;的 矩阵 ， 从 而 
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例 4.1(Ca) M/G/1 排队 系统 。 假设 顾客 依照 参数 为 4 的 泊 松 过 程 来 ” 
到 一 服务 中 心 ， 只 有 一 个 服务 员 ， 来 客 发 现 服务 员 空 着 即刻 得 到 服务 ; 其 他 
人 排队 等 待 直至 轮 到 他 们 。 相 继 的 顾客 的 服务 时 间 假 定 是 独立 的 随机 变量 ， 
有 其 有 共同 的 分 布 G; 且 也 假定 他 们 与 来 到 过 程 独立 。 

上 述 系统 称 为 M/G/1 排队 系统 .字母 M 代表 顾客 来 到 间隔 的 分 布 是 指 
数 分 布 ，G 代表 服务 时 间 的 分 布 ;， 数字 1 表示 只 有 一 个 服务 员 。 

奇 以 六 () 记 在 时 刻 t 系统 中 的 顾客 人 数 , 则 (X(1),t 宇 0; 不 具有 马尔 可 
夫 性 (即将 来 状态 的 条 件 分 布 只 依赖 于 现在 而 不 依赖 于 过 去 ) ,因为 若 我 们 知 
道 在 时 刻 上 系统 中 的 人 数 , 那么 为 了 预测 未 来 的 状态 ,我 们 不 用 关心 从 最 近 
的 一 位 顾客 来 到 后 已 过 去 了 多 少时 间 ( 因 为 来 到 过 程 是 无 记忆 的 ), 但 要 注意 
在 服务 中 的 顾客 已 服务 了 多 长 时 间 (因为 服务 分 布 G 是 任意 的 , 故 不 是 无 记 
忆 的 )。 

死 服 所 述 困 难 的 一 种 方法 是 我 们 只 在 顾客 离 去 的 时 刻 考察 系统 。 即 以 
XX, 记 第 个 顾客 走 后 留 下 的 顾客 数 ，n 之 1。 又 以 Y, 记 第 (x 十 1) 个 顾客 受 服 
务 期 间 来 到 的 顾客 数 。 

当 X,>0 时 , 第 ”个 顾客 离 去 后 余下 有 X, 个 顾客 , 其 中 一 人 进入 服务 ， 
而 其 余 X, 一 1] 人 排队 等 候 . 因 此 , 下 一 个 人 离 去 时 系统 中 将 包含 在 排队 的 忒 ， 
一 1 个 顾客 以 及 第 ”十 1 个 顾客 服务 期 间 的 来 客 。 当 XX 一 0 时 可 作 类 似 的 讨 
论 ， 由 此 可 见 


从, 一 1 十 了 ， 奇 其 ， 0 
(4. 1.2) 及 ,41 二 


Y,, 车 XX, 二 0 
由 于 YY， , n 之 1, 表示 在 不 相 重 倒 的 服务 时 间 区 间 中 来 到 的 人 数 , 来 到 过 
程 又 是 泊 松 过 程 ， 所 以 它们 相互 独立 ， 且 : 


(4.1.3) Pi{Y 7,=7)=| edG(z)， 7 一 0,1，2，…- 
从 (4. 1.2) 与 (4.1. 3) 得 (Xn 一 1 2,…} 是 马尔 可 夫 链 ,转移 概率 为 : 
Pu= | 。 ee dG(z), j 关 0 


"了 15。 


加 ce a (AT) T+! i .~ 
P,=| OT J 之 一 1， i 之 1 


Pi,=0, 其 它 

例 4.1(b) G/M/1 排队 系统 。 假设 顾客 依照 一 个 任意 的 更 新 过 程 来 
到 一 个 单 服务 员 的 服务 中 心 , 来 到 间隔 分 布 为 G。 进 一 步 假设 服务 分 布 是 指 
数 分 布 ， 参 数 为 4， 

若 以 X, 记 第 ”个 顾客 来 到 时 见 到 系统 中 的 顾客 数 , 易 知 过 程 {X,, nn 之 
1? 是 马尔 可 夫 链 。 为 了 对 此 马尔 可 夫 链 计算 转移 概率 P;, 我 们 首先 注意 到 ， 
只 要 有 顾客 在 接受 服务 , 则 在 任意 长 为 上 的 时 间 中 服务 完 的 顾客 数 是 均值 为 
Lt 的 泊 松 随机 变量 。 这 是 因为 相继 的 服务 时 间 服 从 指数 分 布 ， 且 如 我 们 所 
知 ， 这 意味 着 服务 完 的 顾客 数 构成 一 个 泊 松 过 程 。 所 以 ， 


已 ,一 | eco， 一 0,1，yi 
这 是 因为 知 一 个 来 客 发 现 有 ; 个 人 在 系统 中 , 那么 下 一 个 来 客 将 发 现 人 数 为 
:十 1 减 去 已 服务 完毕 的 人 数 , 易 知 有 7 个 人 被 服务 完毕 的 概率 〈 对 相继 来 到 
之 间 的 时 间 取 条 件 ) 等 于 上 式 的 右 端 。 
Pao 的 公式 略 有 不 同 ( 它 是 在 一 个 长 度 分 布 为 G 的 随机 时 间 区 间 内 至 少 
有 计 1 个 泊 松 事件 发 生 的 概率 ) ， 由 下 式 给 出 ; 
Pp,, = 3 Ga), i 之 0 


注 记 读者 应 当 注意 , 在 前 面 两 个 例子 中 , 我 们 能 够 发 现 一 个 
说 人 马尔 可 夫 链 是 因为 我 们 在 某 些 便于 利用 指数 分 布 的 无 记忆 性 
的 时 刻 观察 过 程 。 对 于 出 现 指数 分 布 的 过 程 这 常常 是 一 种 富有 成 


效 的 方法 。 
例 4. 1(c) 独立 同 分 布 随机 变量 之 和 ， 一 般 的 随机 游 动 。 设 X;, i 尝 1， 
独立 同 分 布 ， 且 
P{X 一 让 一 0 7 一 0 十 1] 
若 令 


S, =-0 及 5,= Sx, 
则 {5S;,n 之 0} 是 马尔 可 夫 链 ， 其 转移 概率 
P, dji 
(5,，7 宇 0) 称 为 一 般 随机 游 动 ， 将 在 第 七 章 中 研究 。 
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例 4. 1Cd) 简单 随机 游 动 的 绝对 值 。 随 机 游 动 (S,，n 之 1}， 其 中 5S,= 


之 /Xi， 称 为 简单 随机 游 动 ， 若 对 于 某 个 p，0<p<1， 有 
P{X;=—1}=g 二 1]—p 

于 是 在 简单 随机 游 动 中 过 程 总 是 (以 概率 p) 朝 上 一 步 或 (以 概率 4) 朝 下 一 
步 。 

现在 考虑 简单 随机 游 动 的 绝对 值 |1S, 1。 过程 {1S,1 ,之 1) 度 量 了 此 简单 
随机 游 动 在 各 个 时 刻 与 原点 的 绝对 距离 。 有 点 令 人 惊奇 的 是 {15,1} 本身 是 一 
马尔 可 夫 链 。 为 了 证 明 这 点 , 我 们 首先 证 明 : 车 15,| 二 i， 则 无 论 以 前 的 值 是 
怎么 样 的 ，S, 等 于 ;与 一 相对 立 ) 的 概率 是 p/p' 十 g)。 


命题 4.1.1 
吞 {S$S,，7 之 1) 是 一 简单 随机 游 动 ， 则 
己 人 一 了 | 1S,| = i， 1S,1| = i001 "1S1| = i1) 一 pp 
证 明 若 令 10 一 0， 0 一 0， 且 定 义 
7 一 max{k:0SkEn,i = 0} 
因为 我 们 知道 S; 的 实际 值 ， 所 以 显然 有 
P{S, = | 15,] -一 i,|S,1| 一 zi 一 11} 
一 PS, 一 | |S, | = 2, Sr] 一 zy |9j| 一 0} 


为 使 1S ji+ | jr" 1S, | 二 i ,序列 Djt1 yn 的 值 只 有 两 种 可 能 。 第 一 种 
可 能 导致 $, ==i ,其 概率 为 


2 一 7 十 工 ni 
Pi 29272 
第 二 种 可 能 导致 5, 二 一:， 其 概率 为 
z 力气- 一 训 g 思 + 六 
因此 ， 
| elt mi 
P{S,=i||S,|=i, ,|S|=i}= nj Pp- 4 一 一 
pitags 2+p rr sg a+ 
一 一 大 - 
pta 
命题 得 证 。 


°117。 


从 命题 4. 1. 1 ,并 对 ,= 二 :或 一 : 取 条 件 得 
Pt | Sat1 | 二 i 十 1| 1S, | 一 1， 1S 1 93” ， LS, |} 


一 已 (9 1 一 :十 1|19S，。 二 72) ) 3 
p't! 二 gt! 
十 已 49,+1 (十 1) 1193, 一 1 一 or 
因此 ,11S.1,n 宇 1}) 是 一 马尔 可 夫 链 ,具有 转移 概率 
_p tg _p 
P;;41= p'+q 1 已 ; 1， 1>0 
Pu=1 


4. 2 切 普 曼 -一 柯 尔 芮 哥 洛 夫 方程 及 状态 分 类 


我 们 已 经 定义 了 一 步 转移 概率 Pi;j。 现在 我 们 定义 步 转移 概 
率 P35; 为 处 于 状态 i 的 过 程 经 ”次 转移 后 处 于 状态 7 的 概率 。 即 
放下 =i}，n 宇 0， i,j 六 0 
当然 有 了 二 Pi. 切 普 遇 最 ” 柯 尔 黄 可 洛 夫 方程 提供 了 计算 步 转移 
概率 的 方法 。 这 些 方程 是 对 一 切 x，m 宇 0， 一切 :，7;， 有 
(4. 2. 1) Pri™=— > PP 


k=0 
可 如 下 建立 它们 : 
P+”"=P{X,4n=j|Xo=7) 


= >,P{X,,,=j,X,—=k|Xo=i} 


k=0 


| 


ZiP P{X,rm—=j|X, =k, Xo—i}P{X,=k|Xo=i) 


PP, 


若 以 P wn 步 转移 概率 的 和 矩阵， 则 由 (4. 2. 1) 断言 
Patm 一 Pl) «Plm) 


其 中 的 点 代表 和 拖 阵 乘法 。 因 此 ， 
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| 


Pwo—P.P"Do PP.P. Poe2) oe .= Pr 

于 是 P" 可 以 由 和 矩阵 P 自 磁 ”次 而 算出 。 

若 对 某 个 n 之 0 有 户 二 0, 则 称 从 状态 7 可 到 达 状 态 j。 两 个 相 
互 可 到 达 的 状态 i 与 j 称 为 相通 的 ， 记 作 1i<*j。 

命题 4.2.1 

相通 是 一 种 等 价 关系 ， 即 : 

(1) ze>z; 

Qi) 在 辣 > 7， 则 7 

(iii) 和 著 fe>j) 及 jk， 则 22。 

证 明 ”前 两 点 从 相通 的 定义 显然 得 知 。 为 了 证 明 (ii) ,假设 :ze>7 及 jj 
&; 则 存在 ,” 使 得 P3>0,Px>>0。 因 此 ， 

Pat" 一 Prpw>PrPy0 


类 做 地 可 以 证 明 存 在 一 个 * 使 上 6 六 0。 

称 相通 的 两 个 状态 属于 同一 个 类 ; 由 命题 4. 2. 1, 任意 两 个 类 
或 不 相交 或 相同 , 称 马 尔 可 夫 链 是 不 可 约 的 ,车 只 存在 一 个 类 一 一 
即 一 切 状 态 彼此 相通 。 

称 状态 i 有 周期 4, 铝 对 每 个 不 可 被 gd 整除 的 n 有 P==0, 旦 
d 是 具有 此 性 质 的 最 大 整数 。( 若 对 一 切 ” 字 0, P= 二 0, 则 定义 i 的 
周期 是 无 穷 大 。) 具有 周期 1 的 状态 称 为 非 周期 的 。 以 dz)? 记 :的 
周期 。 现 在 我 们 来 证 明 周 期 性 是 一 个 类 性 质 。 

命题 4.2.2 车 i 有 , 则 QQ) = 二 4 (0)。 

证 明 设 m 与 使 得 P83P$>>0, 且 假设 PP>>0。 则 : 

Pai™ > PPr > 0 
Pt:t™ > P+P;Pr > 0 
例如 ， 第 二 个 不 等 式 成 立 是 因为 其 左 端 表示 链 开 始 时 处 于 状态 j， 经 过 nn 十 s 
二 1m 步 转移 后 回 到 j 的 概率 ， 而 右 端 是 同一 事件 在 经 nw 步 及 nn 十 s 步 后 都 到 
达 红 的 限制 下 的 概率 。 因 此 dd07) 同 时 整除 n 十 mr 与 4 十 mr 十 ;; 于 是 愉 要 PP; 放 
0,n 十 s 十 mx 一 (十 m) 二 s 被 40) 整 除 。 所 以 40) 整 除 40)。 类似 论证 daG) 整 
除 4(7)。 于 是 4G) 二 4())，。 
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对 于 任何 状态 i 与 j, 定义 方 是 从 ; 出 发 在 时 刻 ” 首次 转移 到 


7 的 概率 。 正 式 地 ， 

f=0 

=P{X,=J), XI, k=1, *…, n—1|X,=i} 
今 


fi; 一 > 
则 表示 过 程 从 ? 出 发 迟早 转移 到 状态 态 7 的 概率 。 注意 ， 对 :二 
7，j15 为 正 的 当 且 仅 当 从 : 可 达到 77)。 寿 万 =1， 称 状态 7 是 常 返 
的 ， 百 则 称 为 诊 过 的 或 非常 返 的 。 
命题 4.2. 3 


状态 7 为 常 返 的 当 且 仅 当 之 1/P3 一 co。 


证 明 车 过 程 以 概率 1 从 7 出 发 最 终 要 回 到 j, 则 状态 7 是 常 返 的 , 然 
而 由 马尔 可 夫 性 可 知 : 回 到 状态 7 在 概率 上 过 程 就 重新 开始 。 因 此 ， 概 率 1 
它 将 再 回 到 ;}。 重复 这 种 论证 可 见 到 达 状 态 7 的 次 数 以 概率 1 是 无 限 的 ， 因 
而 其 期 望 是 无 限 的 。 另 一 方面 ， 假 设 7 是 滑 过 的 ， 则 每 当 过 程 回 到 7， 将 有 
一 个 正 概 率 1 一 刻 ;, 它 永远 不 再 回 到 j; 因 此 到 达 j 的 次 数 是 具有 有 限 均 值 1/ 
1 一方 7 的 几何 分 布 的 变量 。 

由 上 述 论证 可 见 状态 7 为 常 返 的 当 且 仅 当 

E [到达 j 的 次 数 |X 一 门 一 co 
但 者 令 
7 一 全 知人 一- 
” (lo， 着 和 和 7 


之 人 1 表示 到 达 ; 的 次 数 。 因 为 


E[ P11x =j|= DJELLIX, = 二 >», 
导致 上 述 命题 的 论证 极为 重要 ， 因 为 它 也 证 明了 一 个 滑 过 状 


态 只 能 到 达 有 限 次 (由 此 得 名 滑 过 )。 这 也 导出 下 述 结论 : 有 限 状 
* 120， 


态 的 马尔 可 夫 链 不 可 能 全 部 状态 都 是 滑 过 的 。 为 了 明 上 及 这 点 ， 假 
设 各 状态 是 0，1，…，M， 且 假设 它们 都 是 滑 过 的 ， 那 么 在 一 段 
有 限时 间 之 后 (比如 T, 时 间 之 后 ) 将 不 再 进入 状态 0, 而 在 一 段 时 
间 ( 比 如 7 之 后 将 不 再 进入 状态 1, 也 在 一 段 时 间 ( 比 如 了 2) 之 后 
将 不 再 进入 状态 2,， 如 此 等 等 。 于 是 在 一 段 有 限时 间 T=max 人 {T。， 
Ti,… ,Tw 之 后 将 不 再 进入 任何 状态 。 但 过 程 在 时 间 了 7 了 之 后 必须 
处 于 某 个 状态 ， 得 到 矛盾 。 这 就 证 明了 至 少 有 一 状态 必须 是 常 返 
的 。 

我 们 将 利用 命题 4. 2. 3 证 明 常 返 性 像 周 期 性 一 样 是 一 个 类 性 
质 。 

系 4. 2. 4 

名 i 是 常 返 的 ， 且 i1<>;， 则 ;是 常 返 的 。 

证 明 设 m 与 4 使 得 P53>>0，P3>0。 现在 对 任意 的 ;之 0 有 

Ps PP 
从 而 
Py "ts > PIPs > Pi 一 co 

由 命题 4. 2. 3， 结论 得 证 。 

例 4.2 (a) 简单 随机 游 动 。 状 态 和 空 间 是 全 休整 数 的 集合 ， 且 转 移 概率 

Piin=p=1— Pi, :二 0, 十 1， 

《其 中 0<p<1) 的 马尔 可 夫 链 称 为 简单 随机 游 动 。 这 过 程 的 一 种 解释 是 它 表 
示 一 个 醉 汉 沿 一 直线 在 游荡 。 另 一 种 解释 是 它 代 表 一 个 赌 徒 的 输赢 , 在 每 次 
赌局 中 他 或 赢 一 元 或 输 一 元 。 

因为 一 切 状态 显然 都 相通 , 所 以 从 系 4. 2. 4 得 , 它们 或 全 是 滑 过 的 或 全 
部 是 常 返 的 。 所 以 我 们 考虑 状态 0， 去 确定 > P% 是 有 限 还 是 无 限 。 

因为 在 奇数 次 赌局 后 不 可 能 打 平 (用 赌博 模型 的 解释 )， 自然 必 有 

Pat! 一 0， 2 一 1,2， 

另 一 方面 ,在 2n 局 之 后 赌 花 无 输赢 当 是 仅 当 他 赢 过 ， 次 输 过 次。 因为 

在 每 局 中 以 概率 p 赢得、 以 概率 1 一 p 输 掉 ， 所 以 欲求 之 概率 是 二 项 概率 ， 


2 
Pe 和 | dl 2 一 > [pO Pp)J, no 二 11,2,3,.* 
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用 斯 特 林 近似 公式 ; 
An! ~ ntl/2e—n 、/ 2x 
(其 中 当 lim Can/b,) =1 时 ， 我 们 说 a 一 2) ， 我 们 得 
pa ~ [4p(1 一 户 ) 了 了 
~ NAN | 
容易 验证 当 a,~b, 时 ，Z/a<co 当 且 仅 当 之 /名 <<co， 因此 之 ,Pg 收 敛 当 且 
仅 当 
SR [4p (1 一 Pp) 
2 
收敛。 然而 4p(1 一 p》 三 1， 等 号 成 立 当 且 仅 当 p 一 1/2。 因 此 2P% 一 品 当 
且 仅 当 p 一 壹 。 于 是 pb 一方 时 链 是 常 返 的 ,而 p 关 1/2 时 链 是 滑 过 的 。 
当 p== 这 时, 上 述 过 程 称 为 对 称 随机 游 动 . 我 们 也 可 以 在 多 维 情形 中 考 
察 对 称 随机 游 动 。 例 如 ,在 二 维 对 称 随机 游 动 中 , 每 一 次 转移 时 分 别 以 概率 
了 向 左 、 向 右 , 向 上 、 向 下 移动 一 步 。 类似 地 在 三 维 时 过 程 将 以 概率 扭转 移 


到 六 个 相 邻 的 点 中 的 任 一 个 .用 在 一 维 随机 游 动 中 同样 的 方法 可 以 证 明 二 维 
对 称 随 机 游 动 是 常 返 的 ， 但 一 切 更 高 维 的 随机 游 动 是 滑 过 的 。 

系 4.2.5 

在 zjJ， 且 7 是 稼 返 的 ， 则 方 一 1。 

证 明 假设 X,=i, 且 设 ”使 得 P3?>0。 若 X, 尖 ) 就 说 我 们 错过 了 机 会 
1。 若 我 们 错过 了 机 会 1, 则 以 Ti 记 下 次 进入 i 的 时 刻 〈 由 系 4.2.4 知 Ti 以 
概率 1 是 有 限 的 )。 若 Xr +。 天 7 就 说 我 们 错过 了 机 会 2。 若 错过 了 机 会 2, 以 
Ts 记 下 一 次 进入 i 的 时 刻 ,车 Xr -和 7 就 说 我 们 错过 了 机 会 3, 等 等 。 容易 
明白 ,达到 首次 成 功 所 需 的 机 会 数 是 一 个 具有 均值 1/P3 的 几何 随机 变量 , 故 
以 概率 1 是 有 限 的 。 因 为 i 是 常 返 的 蕴含 着 可 能 提供 的 机 会 数量 是 无 限 的 ， 
所 以 结论 得 证 。 

以 NG 记 到 时 刻 上 为 止 转移 到 7 的 次 数 . 若 7 是 常 返 的 , 且 
Xn 一 )， 则 因为 一 旦 转移 到 7) 在 概率 上 重新 从 头 开始 , 故 { 人 NG)， 
t 之 0} 是 一 个 来 到 间隔 分 布 为 ( 户 ;, n 之 1) 的 更 新 过 程 。 若 Xo 一 i， 
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i<*>]7， 且 j 是 常 返 的 ， 则 {NN;(2),t 宇 0} 是 一 个 延迟 更 新 过 程 ， 其 初 
始 来 到 间隔 分 布 为 {( 户 ，n 宇 1}。 


4.3 极限 定理 


容易 证 明 ， 知 状态 7 是 滑 过 的 ， 则 对 一 切 i 
>,P < co 
这 意味 着 从 i 出 发 进入 状态 7 的 平均 次 数 是 有 限 的 ， 作 为 一 个 推 
论 ， 对 滑 过 状态 7 ，n 一 吕 O 时 ，P5 一 0。 
以 pjj 记 返回 状态 J 所 需 的 平均 转移 步 数 ， 即 
[ii 一 
之 im 户 ， 耕 7] 是 党 返 的 
将 进入 状态 7 解释 为 更 新 ， 从 第 三 章 的 命题 3. 3.1，3.3.4 及 
3. 4. 1， 我 们 得 到 下 述 定理 。 
定理 4. 3.1 
若 i 与 了 相通， 则 
(1) PllimN(D /t=—1/plXo=i}=1; 
(11) lim DP /n=1/p 
Gili) 在 7 是非 周期 的 ， 则 limPs = 1/p; 
(iv) 车 7 有 周期 4， 则 limP%=4/wj。 
在 状态 7 是 当 返 的 ， 则 入 所 ce 时 我 们 称 它 是 正常 返 的 ， 而 
jp 二 oo 时 称 为 零 常 返 的 。 若 我 们 令 
Ti; = limP”7 
则 一 个 常 返 状态 7, 当 友 0 时 为 正常 返 , 当 交 一 0 时 为 零 常 返 , 下 
述 命题 的 证 明 留 作 一 个 练习 。 
命题 4. 3. 2 
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正 ( 零 ) 常 返 性 是 一 个 类 性 质 ， 

一 个 正常 返 的 非 周期 状态 称 为 遍历 的 。 在 给 出 一 个 如 何在 让 
历 情形 得 到 极限 概率 的 定理 之 前 ， 我 们 需要 以 下 定义 。 

定义 ”对 于 马尔 可 夫 链 , 一 个 概率 分 布 {P)，j 之 0} 称 为 平稳 
的 ， 车 


P,; = DPP,, 了 之 0 
若 X。 的 概率 分 布 ( 辟 如 PP; 一 P(X。 一 了 }, 7 宇 0) 是 平稳 分 布 ， 


则 
P(X=j}= P(X,=j|Xo=i}P {Xo=i) 
= SPP,=P, 
且 由 归纳 法 得 
(4. 3.1) PI{X,=/) = P(X,=j|X,. 一 让 已 (和 一 二 
= SP,p,=P, 


因此 ， 若 初始 概率 分 布 是 平稳 分 布 ， 则 对 一 切 n，X, 有 相同 的 分 
布 。 事 实 上 因 {(X.，, 20} 是 马尔 可 夫 链 , 由 此 易 得 知 对 每 个 m 宇 0， 
,X11 ,和 对 每 个 n 有 具有 相 同 的 分 布 ;换言之 ， {XX,,n 之 0} 
是 一 个 平稳 过 程 。 

定理 4. 3.3 一 个 不 可 约 非 周期 马尔 可 夫 链 属于 下 列 两 种 情 
况 之 一 : 
(i) 状态 或 全 是 滑 过 的 或 全 是 零 常 返 的 ; 此 时 对 一 切 i，j， 
noo 时 Py>0，、 且 不 存在 平稳 分 布 。 

(i) 状态 全 是 正常 返 的 ， 即 

nj=limPy>0 
此 时 , (xj, 二 0,1,2,…} 是 平稳 分 布 , 且 不 存在 任何 其 它 的 平稳 分 
布 。 
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证 明 ”我 们 先 证 明 Gi)。 首 先 注意 ， 对 一 切 M 


[em 


令 n>co 得 ， 对 一 切 M 
这 蕴含 着 


现在 ， 对 一 切 M 
Pr+1= ,PhPy> PraPs 

-0 = 
令 2 一 co 得， 对 一 切 M 

Tj 之 mps 

3 
这 蕴含 着 
Ti 之 mPa J 之 0 


为 了 证 明 上 式 实际 上 是 一 个 等 式 ， 假设 对 某 个 j， 不 等 式 是 严格 的 。 那 么 把 
这 些 不 等 式 相 加 就 得 


ZT 2 mnPy= mo P= On 
1=0 1=0 k=0 是 一 门 一 站 是 二 站 
这 是 一 个 了 矛盾。 所以， 


z= > Py, 7 一 0 1 2，… 
二 0 


记忆 =z/ ms 可见 {Pj,j 二 0,1,2,…,} 是 一 个 平稳 分 布 ,因此 至 少 有 一 平 


稳 分 布 存 在 , 今 设 {P;,j=0,1,2…} 是 任 一 平稳 分 布 。 若 {Pj;,7j=0,1,2,…}) 是 
Xo 的 概率 分 布 , 则 由 (4. 3.1) 有 
P; ~—=P\X,= 7} 


(4. 3.2) = > ,P(X,=j|X,=i}P {Xo—i) 
1 二 必 
一 > ，PyP， 
1 一 0 


从 (4. 3. 2) 看 出 ， 对 一 切 AM 
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先 令 n 后 令 MM 趋 于 ce 得 


《4. 3. 3) 尸 ;之 XP;=x; 


一 站 


为 走 为 一 条 路 证 明 Px;， 用 (4. 3.2) 及 P5 委 1 得 出 ， 对 一 切 计 


M oo 
P< > ,PP 二 > 已， 
t=0 


tf 二 M1 
令 n>0 得 , 对 一 切 M 


M oo 
Pj > ,zi 已 十 > Pn,; 
i=0 


i 二 MM 十 1 


因 之 ,P, 一 1， 所 以 ， 令 M 一 oo 即 得 


(4. 3. 4) PvP 一 

者 诸 状 态 是 滑 过 的 或 零 常 返 的 , 且 {Pj,j 一 0,1,2,…}) 是 一 平稳 分 布 ， 则 
等 式 (4, 3. 2) 成 立 ， 且 P50, 这 显然 是 不 可 能 的 。 于 是 对 于 情形 (i), 不 存 
在 任何 平稳 分 布 ， 证 毕 。 

注 记 

(1) 当 情 况 如 定理 4. 3. 3 Gi) 所 述 时 , 我们 称 马尔 可 夫 链 是 这 
历 的 。 

《2) 和 在 过 程 以 极限 概率 开始 , 则 所 得 马尔 可 夫 链 是 平稳 的 ,这 是 
十 分 直观 的 。 因 为 此 时 马尔 可 夫 链 处 在 时 刻 0 等 价 于 一 个 具有 相同 
P 矩阵 的 独立 马尔 可 夫 链 处 在 时 刻 ce 。 因 此 原来 的 马尔 可 夫 链 处 在 
时 刻 上 等 价 于 第 二 个 链 处 在 时 刻 =2 十 :一 ,所 以 是 平稳 的 。 

(3) 在 不 可 约 ， 正 常 返 ， 周 期 情形 ， 仍 有 zt/，j 汪 0， 是 


z= DP, 
的 唯一 非 负 解 。 但 现在 x; 必须 被 解释 为 马尔 可 夫 链 长 时 间 之 后 处 
于 状态 7 的 时 间 所 占 的 比率 (见习 题 14)。 于 是 ，xtj 二 1/p;， 而 由 
126 。 


定理 4. 3.1(iv) 可 知 ， 跨 nq (j) 的 步子 从 j 到 j 的 极限 概率 为 


limP* 一 4 = dn,; 
noo Hj 
其 中 4 是 马尔 可 夫 链 的 周期 。 


例 4.3Ca) M/G/1 的 嵌入 链 的 极限 概率 。 考虑 例 4. 1(a) 中 MM/G/1 系 
统 的 散 入 马尔 可 夫 链 ， 设 


oj 一 | edG(z) 


即 a; 是 在 一 个 服务 期 内 有 7 个 顾客 来 到 的 概率 ， 这 个 链 的 转移 概率 是 


Po;=:a;j, 
Pij— aj_iti, 10， 7 之 i 一 1 
P= 0,， 7T< 一 ] 


设 6- >) ja .由 于 等 于 在 一 个 服务 期 内 来 到 的 顾客 的 平均 数 ,对 服务 
期 的 长 度 取 条 件 可 得 
0 一 人 ELS jj 
其 中 5 是 服务 时 期 ， 具 有 分 布 G。 
现在 我 们 证 明 当 p<1 时 马尔 可 夫 链 是 正常 返 的 ， 为 此 解 方程 组 


Ti 一 人 > Pi 
现在 这 些 方程 的 形式 为 
了 十 1 
(4. 3. 5) Xj 二 XoQj 十 Diaj sn 7 了 之 0 
i=1 


为 求解 ,我 们 引进 母 函 数 
(5s) 一 Ds, A(s)= Sa 
以 > 乘 (4. 3. 5) 的 两 边 , 旦 对 7 求 和 得 
x(s) 二 zoA(s) 十 Sa ss 


I=0 i=] 
oo oo 
一 To4 《s) 十 51 > tis > aj_it1s "tl 


r=] 了 一 上 一] 


一 mo4(s) 十 (mr(G) 一 xzo) ACs)/s 


“1 2<7。 


(s— 1)xoA(s) 


Ts) 一 5 一 (9 


为 了 计算 xo, 在 上 式 中 令 一 1。 因 为 


limAG) = Sa=1 


由 此 得 
lima(s) =—xolim es 
=xo( 1—A (1)) -1 
其 中 最 后 的 等 式 由 洛 必 达 法 则 而 得 。 今 有 
A(D= Sia=p 


于 是 | 


No 


1—p 


limx(s) 一 
一 


然而 ,因为 imr(Gs) 二 5, 推 知 和 7 一 zo/(1 一 p); 于 是 平稳 概率 存在 当 且 
仅 当 p 过 1, 且 此 时 有 
ro 一 1 一 0 一 1 一 EL9 


因此 , 当 2o<1 ,或 等 价 地 ,下 LS j<1/ 时 ,有 


《1 一 和 [5])G 一 1)46) 
XT(s) AG 


例 4.3(b) G/M/1 的 柑 入 链 的 极限 概率 ,考虑 例 4.1(b) 中 所 述 G/M/1 
排队 系统 的 区 入 马尔 可 夫 链 。 极限 概率 x, 二 0, 1，…, 可 作为 下 列 方程 的 
唯一 解 而 得 到 


| 
k=0 
此 时 它们 归结 为 
之 -Ct 
《4. 3. 6) "= |. e “GHIA k 宇 1 
X= 1 


二 0 
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(我 们 未 包括 方程 二 nmPo， 因 为 总 有 一 个 方程 是 多 余 的 。) 
为 了 解 上 列 方程 ， 我 们 试 求 形成 为 二 cB 的 解 。 代 入 (4. 3 6) 得 


(4.3.7) cA” Cc 之 8] er dC) 


on (But)'t 
-人 “BP > G 十 1 二 人 人 co 


-| elendGlt) 

心 

或 

(4.3.8) p=| eea-pdGG 
心 


常数 < 从 mn = = 1 可 得 ; 
- c=1—p 
因为 x 是 (4. 3. 6) 的 唯一 解 且 z= (1 一 BPB* 满 足 它 , 故 得 
n= (1— PF, k=O0,1,… 

其 中 8 是 方程 (4. 3. 8) 的 解 。( 能 证 明 若 G 的 均值 大 于 平均 服务 时 间 1/p, 则 
存在 唯一 的 8 满足 (4. 3. 8), 它 介 于 0 与 1 之 间 。) 6 的 精确 值 通常 只 能 用 数 
值 方法 得 到 。 

例 4.3 (ec) 更 新 过 程 的 年 龄 . 开始 时 一 个 部 件 投入 使 用 , 当 它 失效 时 ， 
在 下 一 个 使 用 期 的 初始 时 刻 就 被 另 一 个 新 的 部 件 替 换 。 假 设 各 部 件 的 寿命 是 
独立 的 , 且 在 第 i 个 使 用 期 中 失效 的 概率 为 Pi,i 宇 1, 其 中 分 布 {P;} 是 非 周 期 
的 , 且 访 iPi<%， 以 XX, 记 在 时 刻 n 正在 使 用 中 前 部 件 的 年 龄 即使 用 期 数 
(包括 第 ”个 使 用 期 )。 若 以 

MG 一 一 


之 ) 己 
记 年 龄 为 ; 的 部 件 失 效 的 概率 , 则 {X,,n 宇 0) 是 马尔 可 夫 链 ,其 转移 概率 为 
Pii1=A(1)=1— Pr 1- 之 ] 
因此 极限 概率 满足 
(4. 3. 9) 二 SA) 
(4. 3. 10) tpn 1 a)), 1 
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普 代 (4. 3. 10) 得 
zf 一 天 (1 一 4 ) 
一 zi(1 一 0) (1 一 4 一 1)) 
一 zf 1 一 1(1)) (1 一 27) (1—402)) 


一 区 1 > ， P; 


j=t 1 


二 zjP{ 久 之 i 十 1)} 


其 中 X 是 一 个 部 件 的 寿命 。 利 用 之 ,x 一 1 得 


或 
iT1 一 1/ELX] 
县 
(4. 3.11) n= P{X>i} /EL[X]J, 之] 


易 见 它 满 足 (4. 3. 9) 。 
值得 注意 的 是 ,(4. 3. 11) 是 在 意料 之 中 的 ,因为 在 非 格 点 情形 年 龄 的 极 
限 分 布 是 平衡 分 布 ( 见 第 三 章 3. 4 节 )，, 其 密度 是 下 (z)/ 忆 [xj]。 


4.4 类 之 间 的 转移 与 赌 徒 输 光 问 题 


在 本 节 中 我 们 先 证 明 常 返 类 是 闭 的 , 即 一 旦 进入 就 永 不 离开 。 

命题 4. 4. ] 

设 R 是 一 个 常 返 的 状态 类 。 若 1ER，j&R， 则 P;==0。 

证 明 假设 Pj;0。 那么 ,因为 i 与 7 不 相通 ( 因 jR), 所 以 对 一 切 n， 
PP: 二 0。 因 此 痢 过 程 从 状态 i 出发, 则 存在 一 至 少 为 Pj 的 正 概 率 使 过 程 永 不 
回 到 i 此 与 i 是 常 返 的 相 予 盾 , 从 而 有 Pj 二 0。 

设 j 是 一 给 定 的 常 返 状态 ， 以 7 了 记 全 部 请 过 状态 的 集合 ， 对 
:GE 了 了， 我 们 经 常 感 兴趣 的 是 计算 f;;， 过 程 从 7 出 发 迟早 到 达 j 的 
概率 。 下 述 命 题 对 初次 转移 后 的 状态 取 条 件 得 出 一 组 方 满足 的 方 
程 。 
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命题 4.4.2 若是 常 返 的 , 则 概率 组 (yzET 满足 
fi= DyPafyt Pa i€ET 


下 后 了 中 巨 民 
其 中 R 记 与 7 相通 的 状态 的 集合 。 
证 明 
fy=P{N;(00)>0|X,=7i) 


= >P{N;(c0)>0|Xo=i, X=k}P{X=k|X,=i} 
一 功率 


这 > fuPiat fuPi+ 2 fuPn 
kET 上 RR 村 和 


一 > ,fyPat Pa 
下 后 全 下 及 
其 中 我 们 用 系 4. 2. 5 断言 AE 尺 时 一 1 及 用 命题 4. 4. 1 断言 人 &T,k&R 


时 ， fy=0。 

例 4.4 (a) 赌 徒 输 光 问题 . 考虑 一 赂 徒 , 在 每 局 赌博 中 他 以 概率 p 赢 
一 元 以 概率 gq=1 一 p 输 一 元 ,假定 各 局 赌博 是 独立 的 ， 赌 徒 开 始 有 i 元 ， 问 
他 的 赌 金 在 到 达 0( 输 光 ) 之 前 达到 N 元 的 概率 是 多 少 。 

以 X, 记 赌 徒 在 时 刻 n 的 赌 金 ， 则 过 程 {X.,z 一 0,1,2,…，} 是 马尔 可 夫 
链 ， 其 转移 概率 为 

Powo—= Pnn=1 
Piin=p=1—Pi, i=1,2,.…,N—1 
此 马尔 可 夫 链 有 三 个 类 , 即 10}, {1,2,…,NN 一 1} 与 {N}), 第 一 与 第 三 个 是 常 
返 的 ,而 第 二 个 是 滑 过 的 ,由 于 滑 过 状态 只 能 到 达 有 限 次 ,所 以 在 有 限时 间 后 
赌 徒 或 将 达到 N 元 的 目标 或 输 光 。 
以 / =/w 记 赠 徒 从 :元 的 赌 本 开始 , 0 委 ; 委 N,， 最 终 达 到 六 的 概率 。 对 
第 一 局 赌博 的 结果 取 条 件 ( 或 等 价 地 ， 用 命题 4. 4. 2) ， 得 
fi:=pfintafii, i 二 1,2,…N—1 
或 等 价 地 , 因 p 十 g=1 
fin— f= (ff), i=1,2,…,N—1l 
由 于 如 二 0, 从 上 式 可 见 
ffi= sf) = (9/p)f 
ffie= fa fi) ~ (g/p)f 
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fi— fi1= (fi-1— fi-2)= (gqg/p)™ fi 


fu— fu Fu fu-s) =(g/p)M-1f, 


将 前 i 一 1 个 方程 相 加 得 
f:—1=fiL(aq/p)+ (97 pp 六 十 十 (gq/p)' ! | 


或 
1— (gq/p) 
| 若 9/P 关 1 
ifi, 若 9/Pp 二 1 
利用 fw 一 1 得 
1— (g/py 
f.= 人 0 在 Pz1/2 
有 趣 的 是 注意 到 ,N-~ce 时 有 
f 人 车 Pp 之 1/2 
| 0 ， 若 p 志 1/2 


因此 由 概率 的 连续 性 可 得 , 在 与 有 无 穷 赌 本 的 对 手 赌博 中 , 当 p 之 1/2 时 , 贱 
徒 的 赌 本 以 一 正 概率 趋 于 无 穷 ， 而 当 p 硅 1/2 时 ， 将 以 概率 1 输 光 。 


4. 5 分 文 过 程 


考虑 一 个 由 能 产生 同类 后 代 的 个 体 组 成 的 群体 。 每 一 个 体 生 
命 结 束 时 以 概率 P)，j 宇 0， 产 生 了 j 个 新 的 后 代 ， 与 别 的 个 体 产 
生 的 后 代 个 数 相 互 独立 。 初始 的 个 体 数 以 X。 表示, 称 为 第 零 代 的 
总 数 , 第 零 代 的 后 代 构成 第 一 代 ， 其 总 数 记 作 XX,。 一 般 地 ， 以 X， 
记 第 7 代 的 总 数 。 此 马尔 可 夫 链 {X,,n 之 0} 称 为 分 支 过 程 。 
假设 六, 二 1， 注 意 到 
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其 中 2Z; 表示 第 ”一 1 代 的 第 i 个 个 体 的 后 代 个 数 ， 我 们 可 以 计算 
X, 的 均值 。 对 X,-1 取 条 件 得 
ELX,]=ELELX,|X,-1j] 
= jELX,-1] 
=—jELX,-:| 
= 
其 中 py 是 每 个 个 体 的 后 代 个 数 的 均值 。 
以 re 记 从 单个 个 体 开始 群体 壕 早 灭绝 的 概率 。 
对 初始 个 体 的 后 代 个 数 取 条 件 , 可 以 导出 一 个 确定 ro 的 方程 
如 下 : 
7o 一 已 { 群 体 灭绝 } 


一 >)P!{ 群 体 灭绝 |X, 一 jjP， 

给 定 和 :一 7， 和 群体 最 终 灭 绝 当 且 仅 当 以 第 一 代 的 成 员 为 始祖 的 7 
个 家 族 最 终 灭 绝 。 由 于 各 家 族 假定 是 独立 活动 的 ， 而 任 一 家 族 灭 
绝 的 概率 都 是 no, 所 以 得 到 
(4.5.1) ro— Satp, 

事实 上 可 证 明 下 列 

定理 4.5.1 设 Po 之 0 及 Po 十 Pi 过 1， 则 G3) ro 是 满足 

Xo 一 Dp, 

的 最 小 正 数 。(ii) zo 二 1 的 充 要 条 件 是 w 委 1。 


证 明 为 了 证 明 mo 是 (4.5.1) 的 最 小 解 , 设 x 宇 0 满足 (4. 5.1)。 首 先 我 
们 用 归纳 法 证 明 ， 对 于 一 切 n，x 宇 P{X, 二 0}。 现 有 


t= Dp,> wp, = Po = PIX, = 0) 
j=0 


假定 x+ 宇 P{X. 二 0}。 则 
已 (Xi 一 0 一 之 1P(XH = 0|X, = j))P, 
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= 2),(P{X,=0))iP, 
j=0 


< Dwp, (由 归纳 法 假设 ) 

i 
因此 ， 对 一 切 > 

x > P{X, = 0} 
令 aoo 

7 之 limP iX, 二 0) 二 了 (群体 灭绝 } 二 亏 
为 了 证 明 Gi)， 定 义 母 隐 数 

$(s) 一 Psp, 

因为 Pu 十 Pi<1， 对 一 切 sE (0，1) 和 
(5s) = > — 1) °P;>0 


因此 $s) 在 开 区 间 (0,1) 中 是 严格 凸 的 函数 ,现在 分 两 种 情形 (图 4. 5. 1 
与 图 4. 5.2)。 在 图 4.5.1 中 ,对 一 切 sE 《0,1),$(s) 之 s, 而 在 图 45.2 中 ,对 
某 个 sE (0,1) ,$Cs)==s。 几何 上 很 明显 ,图 4. 5.1 表示 (1) 志 1 时 的 图 形 ,而 
图 4. 5. 2 适合 于 风 (1) 之 1 的 情形 。 于 是 ， 因 $ (ro) 二， zo 一 1 当 且 仅 当 


多 (1) 三 1。 由 于 (1) 二 27JP; 一 4， 结果 得 证 。 
j=1 


p(s) 


图 4.5.1 图 4. 5.2 
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4.6 马尔 可 夫 链 的 应 用 


4.6.1 算法 有 效 性 的 马尔 可 夫 链 模型 

在 运筹 学 与 计算 机 科学 中 ， 某 些 算法 以 如 下 的 方式 进行 : 目 
标 是 要 决定 N 个 有 序 元 素 中 的 最 优 者 ， 算 法 以 其 中 一 个 元 素 开 
始 ， 而 后 逐次 移动 到 更 好 的 元 素 ， 直 到 到 达 最 优 者 为 止 。 (最 重要 
的 例子 可 能 是 线性 规划 的 单纯 形 算法 ， 该 算法 试图 要 求 一 个 受 线 
性 约束 条 件 的 线性 郴 数 的 最 大 值 ， 此 时 一 个 元 素 对 应 于 可 行 区 域 
的 一 个 端点 .) 如 果 从 “最 差 的 情况 ”的 角度 考察 算法 的 效率 ， 那 
么 一 般 部 能 构造 出 大 致 需 入 一 1 步 才 到 达 最 优 元 素 的 例子 。 本 节 
中 我 们 将 对 必需 的 步 数 给 出 一 个 简单 的 概率 模型 。 特 别 地 ， 我 们 
考虑 一 个 马尔 可 夫 链 ， 它 从 任何 状态 等 可 能 地 进入 到 任 一 更 好 的 

考虑 一 个 马尔 可 夫 链 ， 其 Pi 二 1， 而 

Py = 7 7 一 1 一 ]，7>>1 

以 了 ; 记 以 状态 :转移 到 状态 1 的 步 数 ， 对 初始 转移 取 条 件 可 得 
ELT;] 的 一 个 递 推 公式 : 


(4. 6. 1) ELT:] =-1 二 二- YE[T] 
从 E[T1] =0 开始 ， 逐 一 看 到 
E[T,] 一 1 


E[Ts] 一 1 十 172 
五 LT 一 1 十 二 | 1+1 十 十 | =1 十 本 十 二 
不 难 猜想 ， 且 可 用 归纳 法 证 明 
ELT. | 一 2 了 
然而 ， 为 了 更 完全 地 描述 了 Tw， 我 们 利用 表达 式 
“135 。 


N—1 
Tw = > 人 
j=1 


其 中 
7 一 人 若 过 程 曾 进 人 J 
”“0， 其 它 
上 述 表 达 式 的 重要 性 来 目下 列 
引 理 4. 6. 1 


了，…，1w 是 独立 的 ， 且 
P{1;= 1}= 1/7, lJ 三 NC 一 ]1 
证 明 给 定 Tijr1， ‘*», Tn, 今 n 二 min{i: 1>]， 1;=1}, 则 


] 一 1) l 
P1{l; = 一 lr Tn} = 一 1/(n— 1) 一 一 


7 一 1) J 
命题 4. 6. 2 
N—1 ] 
(GD 五 [FT 一 之 ， 了 
] | 1 
(ii) Var(Tw) 一 >， 于 |1 一 地 | 


7 一 1 


ii) 对 充分 大 的 N，Tw 渐 近 泊 松 分 布 ， 均 值 为 logN。 
证 明 ”从 引 理 4. 6.1 与 表达 式 Tw 一 1 可 得 人 ) 及 (ii)。 大 量 独立 的 


贝 努 里 随机 变量 的 和 ， 当 各 项 不 为 零 的 概率 很 小 时 , 是 渐 近 泊 松 分 布 的 。 因 
为 


N N=—1 N—1 
| 空 < <1+| 空 
1 人 斌 J 


j=1 ! 7 
或 
N—1 1 
logN < > ， <1+log(N—1) 
了 一 1 
从 而 
N—1 ] 
logN 人 一 
=1 4 
所 以 得 (ii)。 


4. 6. 2 ”应 用 于 游程 一 一 一 个 连续 状态 空间 的 马尔 可 夫 链 
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考虑 一 列 数 x;，x;，…。 如 果 我 们 在 zi 之 前 立 一 竖 线 , 每 当 
Xj 这 Tjt1 就 在 Xj 与 Tj 六! 之 间 江 一 竖 线 ， 那么 两 条 坚 线 之 间 的 段落 
称 为 游程 。 例 如 ， 部 分 序列 3，5，8，2，4，3，1 包括 四 个 游程， 
如 下 所 示 
1 3, 5, 8 | 2, 41311 
这 样 ， 每 个 游程 是 序列 的 一 个 上 升 的 段落 。 
现 假 设 XX1, XX;,… 是 独立 同 分 布 的 (0,1) 上 均匀 分 布 的 随机 变 
量 , 我 们 感 兴趣 的 是 逐个 游程 的 长 度 的 分 布 , 例如 以 工 ! 记 初 始 的 
游程 的 长 度 ,那么 上 至 少 是 m 当 生 仅 当前 x 一 1 个 值 是 依次 上 升 
的 ， 可 见 
1 


P{D m= 


其 后 的 游程 的 分 布 也 容易 得 到 ， 如 果 我 们 知道 这 一 游程 的 初始 值 


Zz。 因 为 在 一 游程 起 始 于 z， 则 
(1 一 过) 1 


(4. 6. 2) 五 (也 之 1 = m1 
因为 要 洲 程 长 至 少 是 mx， 其 后 的 mm 一 1 个 值 都 必须 大 于 z 且 必 须 
依次 增 大 。 


为 了 得 到 一 个 给 定 的 游程 长 度 的 无 条 件 分 布 , 以 I 记 第 nn 个 
洲 程 的 初始 值 。 容 易 看 到 {7;, n 宇 1} 是 一 具有 连续 状态 空间 的 马 
尔 可 夫 链 , 为 了 计算 p(y1x)，, 在 一 个 游程 从 初始 值 z 开始 的 条 件 
下 ， 下 一 游程 起 始 于 y 的 概率 密度 ， 作 如 下 的 推导 : 

PE 人 yy 十 CD 一 工 


->PUsas (yy + dy),L, = ml|l, = 7) 


其 中 工 ， 是 第 个 游程 之 长 ， 此 游程 长 为 m, 且 下 一 游程 起 始 于 y， 
如 果 
(5 其 后 的 闫 一 1 个 值 是 依次 增加 县 全 部 大 于 z; 
G) 第 mm 个 值 必须 等 于 y; 
Qi) 前 mx 一 1 个 值 的 最 大 者 必 超 过 y。 
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因此 ， 
天 17 E (y,y 十 dy),L, 一 172 | 了。 -一 式 } 


_ m— 1 
一 全 dyP {max(Xi, “XX, 1)>y|X,>r， 


i 二 1], ，m 一 1} 


_ m— 1 
Di A 


-2)” ]， 车 x>z 


对 m 求 和 得 


e ”， 若 y<<z 

el 一 cr， 在 y 王 工 

所 以 ，{1,， 4 之 1 是 一 马尔 可 夫 链 ， 具 有 连续 状态 空间 (0,1) 且 转 
移 概 率 密度 由 上 式 给 定 。 

为 了 得 到 7; 的 极限 分 布 , 我 们 先 冒 险 作 一 个 猜测 ， 而 后 利用 
类 似 于 定理 4. 3. 3 的 结果 来 验证 我 们 的 猜测 。 是 第 一 个 游程 的 
初始 值 , 在 (0,1) 上 均匀 分 布 . 然而 , 只 要 有 一 个 值 小 于 其 前 一 值 ， 
后 一 游程 便 开 始 。 因 而 看 来 有 理由 认为 ,小 于 yy 的 这 样 的 值 所 占 
的 比例 长 时 间 之 后 要 等 于 一 个 (0,1) 上 均匀 分 布 的 随机 变量 在 小 
于 第 二 个 相互 独立 的 (0,1) 上 均匀 分 布 变量 的 条 件 下 ,小 于 y 的 概 
率 。 由 于 


户 Cy| 工 ) 一 { 


1,, ~. 
2 (1 y) 


一 站 2 
172 ‘1 >) 


P(X;, > y|X, = XX} = 


所 以 ， 的 极限 密度 x(y) 等 于 
XA(y) = 2(1 — y),， 0<y<1i 
似乎 是 合理 的 。[L 此 极限 密度 的 第 二 种 直接 的 推导 如 下 : 每 一 个 取 
值 y 的 X; 将 是 一 个 新 游程 的 起 点 ， 如 果 它 的 前 一 个 值 大 于 y。 因 
此 初始 值 在 C(y,y 十 dy) 中 的 游程 发 生 的 速率 看 来 等 于 F(y) 
f(y)dy 二 (1 一 y)dy， 所 以 初始 值 在 (y,y 十 dy) 中 的 游程 所 占 比 例 
*。138。 


将 是 (1 一 way/| 0 一 y)dy 一 2(1 一 y)ady。j 因为 可 对 连续 状态 
空间 的 马尔 可 夫 链 证 明 一 个 类 似 于 定理 4. 3.3 的 定理 ， 所 以 为 了 
证 明 上 面 的 猜测 ， 我 们 需 验 证 : 
Xi(y) 一 | rceacylzaz 
这 时 就 归结 为 证 明 
1—y= | ee 一 ce (1 一)CX 十 jaa 一 ZJ)GZ 
或 
1 一 > 二 | ea 一 ZJ)dZ 一 | ea 一 ZX)dzx 
只 要 利用 下 列 恒等式 很 容易 证 得 此 式 : 
[ea se 


这 样 ， 我 们 已 证 明 第 x 个 游程 的 初始 值 1; 的 极限 密度 是 
rz) 一 2(01 一 z)，0<z<1。 因 此 第 ”个 游程 的 长 度 工 。 的 极限 分 布 
为 
(4. 6. 3) lim P{L, 守 mm} = | i 


2 
n+ Don— 1)1 
为 了 计算 一 个 游程 的 平均 长 度 ， 注 意 到 由 (4. 6.2) 有 


m— 1 
E[L|IT = zx] = > $7 2 


2(] — xz)arx 


]—zx 


—€ 


从 而 
limELL,] = | ea"20 — ZX)dz 
一 2 
上 述 极限 也 可 从 (4. 6. 3) 算 得 如 下 : 
EL 一 22 tr oni 
。 139 ， 


它 导 致 有 趣 的 恒等式 


1 一 2 mi 
4.6.3 ”名册 排序 规则 一 一 移 前 一 位 规则 的 最 优 性 
假设 给 定 a 个 元 素 e1，…, e,， 将 它们 按 某 种 顺序 排列 ,每 次 
要 求 取出 其 中 一 个 元 素 ， 然 后 放 回 并 将 个 元 素 重新 排序 ， 每 次 


取出 (与 过 去 独立 ) 的 概率 为 P,P 之 0，>P, 一 1 感 兴趣 的 问 


题 是 要 确定 一 种 最 优 排序 规则 以 便 使 长 时 间 后 被 取出 的 元 素 的 平 
均 位 置 最 小 。 显然 硅 Pi; 已 知 , 则 最 优 的 排序 规则 就 是 每 次 都 按照 
P; 的 递减 次 序 去 安排 诸 元 素 。 事 实 上 ,即使 诸 已 未 知 , 我 们 也 能 
渐 近 地 做 到 ， 即 每 次 依照 各 元 素 已 被 取出 的 次 数 的 递减 次 序 去 排 
列 它 们 。 然 而 ， 问 题 会 变 得 更 有 趣 ， 如 果 我 们 不 允许 有 上 述 排序 
规则 所 必要 的 存储 记忆 的 功能 ， 而 对 重新 排序 的 规则 作 如 下 的 限 
制 : 每 次 元 素 的 重新 排序 只 允许 依赖 于 现在 的 排列 次 序 及 这 次 取 
出 的 元 素 的 位 置 。 

对 于 一 个 给 定 的 重新 排序 规则 ， 被 取出 的 元 素 的 平均 位 置 至 
少 在 理论 上 可 以 通过 分 析 有 1! 个 状态 的 马尔 可 夫 链 得 到 , 这 个 马 
尔 可 夫 链 在 任 一 时 刻 的 状态 就 是 元 素 这 时 的 排列 次 序 。 然 而 ， 对 
这 人 么 多 的 状态 , 分 析 很 快 变 成 不 可 行 的 , 所 以 我 们 把 问题 简化 , 假 
定 概 率 满 足 : 


P= p,， P, 一 … = PP, = ———— 


这 时 ， 因 为 从 第 二 列 第 ”个 元 素 ， 在 被 取出 的 概率 相等 的 意义 下 

是 无 区 别 的 ,被 取出 的 元 素 的 平均 位 置 可 以 通过 分 析 简 单 得 多 的 、 

只 有 7 个 状态 的 马尔 可 夫 链 得 到 ,这 马尔 可 夫 链 的 状态 就 是 Pi 的 

位 置 。 在 对 概率 作 这 样 的 假设 之 下 ， 在 一 大 类 规则 之 中 ， 把 取出 

的 元 素 移 到 前 面 一 个 位 置 上 去 的 “ 移 前 一 位 规则 ”是 最 优 的 。 
考虑 如 下 限定 的 一 类 规则 , 当 取 出 的 元 素 是 在 位 置 ; 上 时 ,把 

此 元 素 移 到 位 置 j; 上 去 ， 而 其 它 的 元 素 的 相对 位 置 保持 不 动 。 此 
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外 假设 ， 对 ?1， 六 =1 及 j 之 ji-1， 1 一 2，3，"…,，n 有 ji<i。 集 
合 人 ji 并 王 12 就 刻 划 了 一 个 规则 。 

对 于 给 定 的 一 个 此 类 规则 ， 令 

K() 一 maxtL: 1 17) 

换 句 话说， 对 任意 的 i， 任何 位 置 i, i 十 1，…,， i 十 KK(1) 上 的 一 个 
元 素 如 果 被 取出 ， 将 被 移 到 小 于 或 等 于 7 的 位 置 上 。 

对 于 一 个 特定 的 上 述 类 型 的 规则 R( 壁 如 说 对 于 它 (2)=& 
(2)， i 二 1,2,…,n) ,在 使 用 此 规则 时 的 平稳 分 布 记 为 : 

7 一 Pitel 处 于 位 置 必 ， i 二 1 


此 外 ， 令 

I 一 之 mm 一 Pte 的 位 置 大 于 i}， i 之 0 
记号 了 ~ 意味 者 上 述 概 率 是 极限 概率 。 在 写 下 稳 态 方程 之 前 , 值得 
注意 以 下 事实 : 


(i) 任何 元 素 每 次 至 多 朝 后 移动 一 个 位 置 。 
(i) 如 果 一 个 元 素 处 于 位 置 i, 而 且 既 不 是 它 也 不 是 它 后 面 的 
(让 个 位 置 上 的 元 素 被 取出 ， 则 它 将 仍然 在 位 置 1 上 。 
Gii) 任何 处 于 诸位 置 i, i 十 1,… ,i 十 kG) 上 的 元 素 若 被 取出 ， 
它 将 被 移 到 委 : 的 位 置 上 。 
现在 容易 看 到 稳 态 概率 是 : 
I = 1; ,ie;) 十 (Il; 一 I ,0 ) (1 一 户 ) 十 (Li; 一 ll,)gk(i) 
此 式 成 立 是 因为 元 素 e 将 在 大 于 i 的 位 置 上 ， 如 果 它 在 前 一 次 的 
位 置 大 于 ;十 &(Gz) ,或 者 它 的 位 置 小 于 i 十 (7) 且 大 于 i 然而 未 被 取 
出 ， 或 者 它 在 位 置 : 上 日 取出 了 位 置 i 十 1， 机 i 十 E(1) 上 的 一 个 
元 素 。 上 面 的 方程 等 价 于 
(4. 6. 4) IL; 一 all; 十 (1 一 a HH, ,10)， 1 二 1,*…,n—1 
ll,=1,， 本 .一 0 
其 中 
2 = KC) 
”qk(1) 十 p 
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现在 考虑 一 个 特殊 的 属于 所 限制 的 类 型 的 规则 ， 即 移 前 一 位 
规则 ， 它 有 方 二 i 一 1， i 二 2，…，n， 广 二 1， 对 移 前 一 位 规则 ， 相 
应 的 I 记 为 正 。 对 此 规则 天 (一 1， 所 以 从 方程 (4. 6. 4) 得 

I = all;_ 十 pl 


Pg 
或 等 价 地 
IT,,,—I,= pe — IT.,) 
这 蕴含 着 
IE + I++ 六， 一 it 一 I ,_;) 
_fgq\’ i 
一 | 二 | (IL.—IH.,) 


把 上 面 的 方程 对 j 二 1，…，r 相 加 得 
FT T= (N_i 4 | gl i |r 
T= LL+.+|2)], i+r< 
令 r 二 k(?), 其 中 (让 是 我 们 所 讨论 的 规则 类 中 的 一 个 给 定 的 规则 
R 的 (i) 的 值 ,我 们 看 到 


p 
或 等 价 地 
(4. 6. 5) I = bl ,+ (bo) i1=1,.…,n—1 
IL=1, IL,=0 z 
其 中 
— (9g/ 户 ) 十 … 十 (9/ 户 ) 
1+/ Tg/pye 
现在 我 们 可 以 证 明 以 下 的 
命题 4. 6.3 


大 Pp 之 1/n， 则 对 一 切 ? LL。 
震 p 信 1/n， 则 对 一 切 i J 之 H。 
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证 明 考虑 p 之 1/n 的 情形 ， 它 等 价 于 >>9， 注 意 此 时 有 


] 1 
1 
“TIFE7 pg I+9/pH /pe 
现在 定义 一 马尔 可 夫 链 具有 状态 0，1，…，n 及 转移 概率 
Po,o = Pn = 1 
Ci 7 一 :一 ]， 
《4. 6.6) P,={ 在 ， . 1 二 ],'**， nl] 
1 一 c;， 若 j= 二 i 十 kGQ2)， 


以 fi 记 马 尔 可 夫 链 以 状态 i 出 发 迟早 进入 状态 0 的 概率 ， 则 fi 满足 
fi=cfiit (lc)fisnw, i= 1,…,n— 1 
fo=1, f=0 
能 够 证 明 上 列 方程 组 有 了 唯一 解 ， 所 以 ， 如 果 我 们 对 一 切 i 取 ci 等 于 a 则 由 
(4. 6. 4) J; 将 等 于 规则 的 II; 如 果 我 们 令 c; 二 56:, 则 由 (4. 6. 5) fi 等 于 I， 
由 《4. 6. 6 定义 的 马尔 可 夫 链 迟早 进入 状态 0 的 概率 是 向 量 c= (cl，…， 
c-1) 的 一 个 递增 函数 ， 这 在 直观 上 是 清楚 的 (我 们 推迟 到 第 八 章 再 给 出 一 个 
正式 的 证 明 )。 因 为 a; 宇 6;， i 二 1，…，n， 我 们 看 到 对 于 一 切 i 
IL 之 于 

当 入 1/ 时 a; 寺 b;，i 王 1，… ,nn 一 1， 从 而 上 面 不 等 式 反 向 。 

定理 4.6.4 在 所 考虑 的 规则 中 ， 移 前 一 位 规则 使 被 取出 的 
元 素 的 极限 平均 位 置 最 小 。 

证 明 以 习 记 ei 的 位 置 ， 以 el 是否 被 取 到 为 条 件 ， 那 么 被 取出 的 元 


素 的 平均 位 置 能 表示 为 
EF[ 位 置 ]=pELX] 十 《1 一 p) 人] 二 2 二 二 一 全 
= (pi ELX]+ 3 
于 是 , 若 p 之 1/n, 则 使 E[X] 达 最 小 而 得 到 最 小 的 平均 位 置 , 而 车 p<1/%， 
则 使 E[X] 达到 最 大 而 得 到 最 小 的 平均 位 置 . 由 于 ELX]= > P(X 之 让 ,所 


以 由 命题 4. 6. 3 定理 得 证 。 
4.7 时 间 可 逆 的 马尔 可 夫 链 


一 个 不 可 约 正 常 返 马 尔 可 夫 链 是 平稳 的 ， 若 初始 状态 的 选取 
。 143。 


服从 平稳 分 布 。( 在 遍历 链 的 情形 这 等 价 于 设想 此 过 程 从 t= 一 cc 
开始 .) 我 们 说 这 样 一 个 链 处 在 稳 态 之 中 。 
现在 考虑 一 个 具有 转移 概率 Pv 及 平稳 分 布 r 的 平稳 马尔 可 
夫 链 , 且 假 设 从 某 个 时 刻 开始 我 们 把 时 间 倒 过 来 追踪 状态 的 序列 。 
也 就 是 从 时 刻 半 开始 考虑 状态 序列 X,，X,，,. …， 此 状态 序列 本 
身 也 是 一 个 马尔 可 夫 链 ， 转 移 概率 已; 为 


Pa =P {Xm= 7| Xnt+1=i, Xm =12. 人 Km kik} 
_? tn 一 7 Xmt+1=i, Xm+2=iz， 一) 
P {Xmt+t1=i, Xmt2—=i2, 和， 二 一 下) 
一 用 P (Xmt1=i|Xm=j)} P (Xm-2—iz, “*» Xmtt= jk|Xm=j, Xmt1=i 
Pr 《天 二 1 一 二 Pr {Xmt+2 =i2, 的 Xmit—=it m1 =7} 
_ { 生 mm+2 一 2， "ys KmtR—= J | Xm+1=i} 
niP {m+2=i2， “** Kmtk™—ig|Xm+1 i) 
A 
二 部 
于 是 此 逆 过 程 也 是 一 个 马尔 可 夫 链 ， 转 移 概 率 为 
p* oT 
i 江 . 


如 果 对 一 切 i, 7 有 Pj 二 Pi, 则 称 此 马尔 可 夫 链 是 时 间 可 逆 的 。 时 
间 可 逆 性 的 条 件 即 是 对 一 切 :，7 
(4.7.1) 1 一 Ti 已; 
它 可 解释 为 对 一 切 状态 与 六 过 程 从 : 到 j 的 比率 ( 即 六 Ps) 等 于 
它 从 7 到 i 的 比率 ( 即 xPi)。 应 该 指出 ,这 是 时 间 可 道 性 的 一 个 显 
然 的 必要 条 件 ， 因 为 逆 时 间 方 向 的 从 i 转移 到 ; 等 价 于 顺 时 间 方 
向 从 7 转移 到 i; 即 ， 关头 ,二 i 及 Xm-1 王 jj， 则 逆 时 间 方 向 看 ， 这 
是 从 : 转移 到 7， 而 顺 时 间 看 这 就 是 从 7 转移 到 i。 

如 果 能 找到 总 和 为 1 的 非 负 数 满 足 (4.7.1), 则 此 马尔 可 夫 链 
是 时 间 可 道 的 且 这 些 数 表示 平稳 分 布 ， 因 为 如 果 


(4., 7. 2) Ti ij—= TPis 对 一 切 7 ， 7 > ,和 一 1， 
i=0 
则 对 i 求 和 得 
> TiPj 一 zi > Pj=x;, > z=1 
t=0 1 二 必 ft 
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由 于 平稳 分 布 x; 是 上 式 的 唯一 解 ， 故 得 对 一 切 i 有 zi 二 zt。 
例 4.7(a) 一 个 遍历 随机 游 动 。 无 需 任何 计算 我 们 能 够 证 明 满 足 已 ,+1 
十 Pi 二 1 的 一 个 遍历 链 是 时 间 可 首 的。 注意 到 在 任何 时 候 从 i 到 i 十 1 的 
转移 次 数 与 以 i 十 1 到 i 的 转移 次 数 相 差 必 不 超过 1 就 可 得 出 此 结论 .而 后 者 
是 因为 任何 两 次 从 i 到 i 十 1 的 转移 之 间 必 有 一 次 是 从 i 十 1 到 i 的 转移 ( 反 
之 亦 然 ), 以 更 高 的 状态 重 返 状态 i 必须 经 过 状态 i 十 1, 因此 从 i 到 i 十 1 转移 
的 比率 等 于 从 i 十 1 到 i 的 比率 ， 从 而 过 程 是 时 间 可 逆 的 。 
如 果 我 们 试 着 对 任意 的 马尔 可 夫 链 求解 方程 (4. 7. 2) ,那么 通 
常 解 不 存在 。 例 如 ， 由 (4.7. 2) 
XPi—=rPs; 
TPy=z Pi 


(者 PPA0) 这 包含 了 


一 般 它 不 一 定 等 于 Ps/Pi, 于 是 可 见 时 间 可 逆 性 的 一 个 必要 条 件 
是 对 一 切 i，j, 
(4.7.3) 一 
它 等 价 于 说 , 从 状态 i 出 发 的 路 径 i 一 h->ji 与 逆向 路 径 i->j->& 
~ 具有 相同 的 概率 。 为 了 明 及 为 何 这 是 必要 的 , 注意 时 间 可 逆 性 
列 售 着 一 串 从 z 到 & 到 7 到 ; 的 转移 发 生 的 比率 必须 等 于 一 串 从 : 
到 j 到 & 到 i 的 转移 发 生 的 比率 (为 什么 ?)， 从 而 必 有 
TPaPoP;i=mP, PP 

由 此 推 得 (4. 7. 3)。 

事实 上 ， 我 们 能 够 证 明 下 列 

定理 4.7.1 平稳 马尔 可 夫 链 是 时 间 可 逆 的 ， 当 且 仅 当 对 一 
切 任何 一 条 以 i 出 发 再 回 到 i 的 路 径 与 其 逆向 路 径 有 相同 的 概 
率 ， 即 对 一 切 状 态 z，，……， 冯 
(4.7.4) Pi Pai," "… “Pi; :一 卫 ， Pi i Pi 

证 明 必要 性 的 证 明 已 经 指明 。 为 了 证 明 充 分 性 ， 固 定 状态 i 与 ; 且 
改写 (4.7. 4) 为 
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P a 二 导 


Did i vio ] 
就 一 切 状 态 红 1， 12» ”” ”9 78 求 和 得 
PtP;= P,P! 


因此 ， 
Sr Fm 
Pi 一 : =Psy TO 
令 n 一 中 得 
PT;— Pi 


例 4.7(b〉 名 册 问 题 . 设 给 定 ”个 元 素 ( 从 1 到 ?编号 ), 它们 被 排列 成 
有 次 序 的 名 册 , 每 次 要 求 取 出 其 中 一 个 元 素 , 取 到 元 素 i( 与 过 去 独立 ) 的 概 
率 为 P;， 取出 之 后 再 放 回 , 但 不 必 放 在 同一 位 置 。 事实 上 , 我 们 假设 取出 的 
元 素 被 移动 到 名 册 的 前 面 一 位 上 ; 例如 ， 现 在 名 册 次 序 为 1，3,; 4，2，5 而 
2 被 取出 ， 然 后 新 的 次 序 成 为 1，3，2，4，5。 

对 于 任 给 的 概率 向 量 忆 = (Pi, P;,…, P,), 能 为 上 述 情形 建立 一 个 1 
个 状态 的 马尔 可 夫 链 的 模型 , 在 任 一 时 刻 的 状态 就 是 此 时 的 名 册 次 序 。 用 定 
理 4.7.1 容易 证 明 这 个 链 是 时 间 可 逆 的 。 例如 , 假设 x 一 3, 考虑 下 列 从 状态 
《1,2,3) 到 自身 的 路 径 
(1,2,3) 一 (2,1,3)->(2,3,1)->(3,2,1)->(3,1,2)->(1,3,2) 一 (1,2,3) 
按 正方 向 及 按 逆 方 向 的 转移 概率 的 乘积 都 等 于 PiP2Pi。 由 于 类 似 的 结果 一 - 
般 情 形 也 成 立 ， 所 以 此 马尔 可 夫 链 是 时 间 可 逆 的 ， 

事实 上 , 注意 到 下 列 事实 也 能 验证 时 间 可 逆 性 与 极限 概率 。 对 任意 的 置 
换 (i ，iz，…i,)， 由 下 式 给 出 的 概率 

xisiain) —CP? PE Pi 
满足 方程 式 (4. 7.1)， 其 中 C 取得 使 
2) x i) =1 


因此 ， 我 们 得 到 了 链 是 可 逆 的 第 二 种 证 明 ， 且 平稳 分 布 如 上 给 出 。 
逆 回 链 的 概念 甚至 在 过 程 不 是 时 间 可 道 时 也 是 有 用 的 。 为 了 
说 明 这 点 我 们 从 下 列 年 理 开 始 。 
定理 4.7.2 考虑 一 个 转移 概率 为 P; 的 不 可 约 马 尔 可 夫 链 ， 
。 146。 


如 果 能 找到 非 负 数 x.，i 宇 0， 其 和 为 1， 及 一 个 转移 矩阵 P* = 
LP;j 」 使 得 
(4.7.6) xP;; = P; 
则 x;，i 宇 09， 是 平稳 概率 分 布 ，P; 是 逆向 链 的 转移 概率 。 
证 明 将 上 列 等 式 对 一 切 i 求 和 得 
2 riPy—n uP} 


因此 7 是 正 疝 链 的 平稳 分 布 (而 且 也 是 逆向 链 的 平稳 分 布 ; 为 什么 ?)。 因 为 
Ths 


Ty) 


P; 


故 得 P; 是 逆向 链 的 转移 概率 。 

定理 4.7. 2 的 重要 性 在 于 有 时 我 们 能 猜测 逆向 链 的 本 性 ， 而 
后 利用 方程 (4. 7.6) 同 时 得 到 平稳 分 布 与 已; 。 

例 4.7(c) 让 我 们 再 考虑 例 4. 3(c),， 它 处 理 离 散 时 间 更 新 过 程 的 年 龄 ， 
以 XX, 记 一 个 更 新 过 程 在 时 刻 的 年 龄 ， 其 来 到 间隔 都 是 整数 。 因 此 此 马尔 
可 夫 链 的 状态 总 是 增加 1， 直 到 它 到 达 一 个 按 来 到 间隔 的 分 布 选 定 的 值 ， 而 
后 降 为 1。 所 以 逆向 过 程 总 是 减少 1, 直到 它 到 达 状态 1， 此 时 它 跳 到 一 个 按 
来 到 间 申 的 分 布 选 定 的 状态 ， 因 此 看 来 道 向 过 程 正 是 过 剩 或 剩余 寿命 过 程 。 

以 P; 记 来 到 间隔 等 于 i 的 概率 ，i 宇 1， 看 来 很 可 能 有 

Pi=P, Pii =1l, 这 1 


因为 
P= 二 一 二 一 已: +1， 之 1 
2P,; 
对 上 面 给 出 的 逆向 链 ， 由 (4. 7. 6) 我 们 需要 有 
、 TE, ~xP, 
2P, 
或 X= XPIlXi) 


其 中 X 是 一 个 来 到 间隔 ， 因为 >=1， 所 以 上 式 必定 要 有 
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1 一 za >》 P(X 


Et 一 ] 


一 元 五 [ 和 ] ， 
从 而 为 了 使 着 向 链 如 同 我 们 所 猜测 的 那样 ， 必 须 有 
了 (信之 二 
(4. 7. 7) Ti 一 EIX] 


为 了 完成 道 向 过 程 是 剩余 寿命 及 极限 概率 为 (4.7.7) 所 给 定 的 证 明 , 我 们 需 
要 验证 : 

TP = mp Pi 
或 等 价 地 


P(X>i}[L1- ] = P{X 之 i 十 1} 


ff 
已 { 和 之 3) 
而 此 式 可 立即 得 到 。 
因此 , 察看 逆向 链 我 们 能 够 证 明 它 就 是 更 新 过 程 的 剩余 寿命 , 且 同 时 得 
到 (既是 剩余 寿命 又 是 年 龄 的 ) 极 限 分 布 。 事实 上 , 这 个 例子 补充 阐明 了 为 什 
么 更 新 过 程 的 剩余 寿命 与 年 龄 有 同样 的 极限 分 布 。 
利用 逆 回 链 得 到 极限 概率 的 技巧 在 第 五 章 处 理 连续 时 间 马 尔 


可 夫 链 时 将 进一步 运用 。 
4.8 半 马 尔 可 夫 过 各 


一 个 半 马 尔 可 夫 过 程 是 一 个 随机 过 程 ， 其 状态 变化 遵循 一 个 
马尔 可 夫 链 , 而 状态 变化 的 时 间 间 隔 是 随机 变量 .更 确切 地 说 , 考 
入 状态 1，i 宇 0 时 

(1) 下 一 个 进入 的 状态 是 7 的 概率 为 P;;, i,j 宇 0。 

Go) 在 下 一 个 进入 的 状态 是 7 的 条 件 下 , 直到 发 生 从 i 到 7 转 
移 为 止 的 时 间 有 分 布 Fi 

各 以 和 (5b0 记 时 刻 上 的 状态 ,; 则 {ZC ,i 三 0} 称 为 半 马 尔 可 夫 过 
程 。 

一 个 半 马 尔 可 夫 过 程 不 具有 给 定 现在 的 状态 时 将 来 与 过 去 独 
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立 的 马尔 可 夫 性 , 为 了 预测 将 来 , 我们 不 仅 要 知道 现在 的 状态 , 还 
要 知道 在 此 状态 已 停留 了 多 少时 间 。 当 然 ， 在 转移 的 时 刻 ， 我 们 
所 需要 知道 的 只 是 新 的 状态 (而 无 需 关于 过 去 的 情况 ), 一 个 马尔 
可 夫 链 是 一 个 半 马 尔 可 夫 过 程 ， 其 
0， tl] 
1， t 之 1 
即 一 个 马尔 可 夫 链 的 转移 时 间 恒 为 1。 

以 于; 记 半 马尔 可 夫 过 程 在 转移 之 前 处 于 状态 i 的 时 间 的 分 
布 。 对 下 一 个 状态 取 条 件 可 见 

H(t)= > PyFi, (0) 


Fi;(t) = 


以 mA 记 其 均值 ， 即 
j= | zdHi,(z) 


若 以 X, 记 第 个 到 达 的 状态 , 则 {X,, n 宇 0} 是 一 个 转移 概 
率 为 PP 的 马尔 可 夫 链 ， 它 称 为 半 马 尔 可 夫 过 程 的 圣人 马尔 可 夫 
链 。 若 此 嵌入 马尔 可 夫 链 是 不 可 约 的 ， 则 称 此 半 马 尔 可 夫 过 程 是 

以 Ts 记 相 继 进 入 状态 i 之 间 的 时 间 , 且 邻 p=E [TJ]。 运用 
交错 更 新 过 程 理论 ， 导 出 半 马 尔 可 夫 过 程 的 极限 概率 的 表达 式 是 
一 件 简单 的 事情 。 

命题 4. 8.1 z 

若 半 马尔 可 夫 过 程 是 不 可 约 的 , 且 T; 具 有 非 格 点 的 分 布 与 有 
限 的 均值 ， 则 

P=limP {Z()=i|2(0)=) 

存在 且 与 初始 状态 无 关 。 更 进一步 ， 


PP 二 各 
Ar 
证 明 每 当 过 程 进入 状态 i 就 说 一 个 循环 开始 ， 且 当 过 程 处 于 状态 : 
时 就 说 过 程 是 “ 开 的 ”， 不 在 状态 i 时 则 它 是 “ 关 的 ”。 于 是 我 们 有 了 一 个 
* ]49。 


( 当 Z(0) 天 ; 时 是 延迟 的 ) 交错 更 新 过 程 ， 它 开 着 的 时 间 有 分 布 H;， 而 它 的 
循环 时 间 为 Ts 。 因 此， 由 第 三 章 的 命题 3. 4. 4 结论 得 证 。 

作为 一 个 系 我 们 注意 到 已: 也 等 于 长 时 间 之 后 过 程 处 于 状态 ? 
的 时 间 的 比率 。 

系 4. 8. 2 

若 半 马尔 可 夫 过 程 是 不 可 约 的 ， 且 yO， 则 以 概率 1 
[0,1] 中 处 于 状态 : 的 时 间 


Lad 一 [im 
Hi 


即 /和 等 于 长 时 期 之 后 处 于 状态 : 的 时 间 的 比率 

证 明 由 第 三 章 的 命题 3. 7. 2 可 得 。 

里 然 命题 4. 8. 1 给 出 了 极限 概率 的 表达 式 ， 但 它 并 不 是 一 个 
实际 计算 P; 的 方法 。 为 要 计算 P;， 假 设 租 入 马尔 可 夫 链 {X， 
n 之 0) 不 可 约 正常 返 ,， 又 设 它 的 平稳 分 布 是 zj, 7 宇 0。 凤 x, j 守 0， 
是 


Tj 一 > xiP, 
2 一 习 


>=1 

的 唯一 解 ， 且 Tj 可 解释 为 等 于 7 的 和 ,所 占 的 比率 。( 若 马尔 可 夫 
链 是 非 周 期 的 ， 则 zj 也 等 于 lmP\X,=j}.) 既然 x; 等 于 进入 状 
态 ; 的 转移 的 比率 ， 而 是 每 一 次 转移 到 j 后 处 于 状态 7 的 平均 
时 间 ， 所 以 直观 地 看 来 极限 概率 应 与 ww 成 比例 。 现 在 我 们 证 明 
这 一 点 。 

定理 4. 8.3 假设 命 展 4.8.1 的 条 件 成 立 ， 且 进一步 假设 赔 
入 马尔 可 夫 链 {X,,n 之 0} 是 正常 返 的 ， 则 


证 明 ”定义 记号 如 下 : 
Y:( 站 二 第 j 次 到 达 状 态 i 后 在 状态 i 逗留 的 时 间 ,i,j 宇 0。 
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Ni 一 在 半 马 尔 可 夫 过 程 的 前 次 转移 中 到 达 状 态 i 的 次 数 。 
利用 上 述 记 号 可 见 ， 在 前 mx 次 转移 中 处 于 状态 i 的 时 间 的 比率 《 记 为 
Psm) 如 下 : 


(4. 8.1) Pi=n— Ne 


一 一 二- 一 
~ N.;(m) 、 YC7) 


由 于 加 co 时，Nilm)>co， 从 强大 数 定律 推 得 


由 更 新 过 程 的 强 极限 律 得 
全 2” -= (上 [两 次 到 达 ; 之 问 的 转移 次 数 ])-: 一 aa 
因此 ， 在 (4. 8. 1) 中 今 mr 一 co 证 明了 


让 nt [ 
2 Tp 
7 


证 毕 。 

从 定理 4. 8. 3 得 出 , 极限 概率 只 依赖 于 转移 概率 已, 与 平均 时 
间 Am， z，J/ 之 0。 

例 4. 8Ga) 一 部 机 器 可 能 有 三 种 状态 : 良好 ， 尚好, 或 损坏 。 假 设 良好 
状态 的 机 器 保持 良好 的 平均 时 间 为 ,然后 分 别 以 概率 3/4 与 1/4 转 到 尚好 
或 损坏 的 状态 ， 处 于 尚好 状态 的 机 器 保持 此 状态 的 平均 时 间 为 x， 然后 损 
坏 , 一 部 损坏 的 机 器 将 被 修理 , 修理 所 用 的 平均 时 间 为 和 ze， 修理 好 的 机 器 以 
概率 2/3 处 于 良好 状态 , 以 概率 1/3 处 于 尚好 状态 。 机 器 处 于 各 状态 的 时 间 
的 比率 是 多 少 ? 

解 ” 设 状态 是 1，2，3，r 满足 

Xi 十 xz 十 Ti 一 ] 
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其 解 是 


和 
15° 


因此 ， 机 器 处 于 状态 i 的 时 间 的 比率 P; 为 


_ 4 
411 二 582 二 623 


DAez 
4A4 十 5Hpa 十 6Hs 


6As 
4 十 5pz 6p 


确定 半 马 尔 可 夫 过 程 的 极限 分 布 的 问题 并 未 因为 求 出 了 己 
而 完全 解决 。 例 如 , 我们 可 能 想 求 在 时 刻 上 处 于 状态 i， 下 一 次 转 
移 在 时 刻 上 十 z 之 前 并 转移 到 状态 7 的 概率 在 :一 2 时 的 极限 。 为 
了 表示 这 个 概率 令 
YQ) 二 从 zt 到 下 一 次 转移 的 时 间 
S() 二 t 之 后 首次 转移 进入 的 状态 


A 


PF: 
P: 


PP; 一 


为 了 计算 
limP {ZC()=i, Y(t)>zx, SQ)=)) 


我 们 将 再 次 使 用 交错 更 新 过 程 理 论 。 
定理 4.8.4 若 半 马尔 可 夫 过 程 不 可 约 , 且 是 非 格 点 的 , 则 
(4. 8. 2) limP{2Z() =i, Y(2)>x, S(t)=712Z(0)=k} 


P,| Fi(y)dy 


证 明 每 当 过 程 进 人 状态 i， 就 说 一 个 循环 开始 了 ; 车 状态 为 i， 在 状 
态 i 至 少 停留 x 时 间 且 下 一 个 状态 是 7, 就 说 它 是 “ 开 的 ”。 其 余 情 况 说 它 是 
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“ 关 的 ”， 这 样 ， 我 们 就 有 一 个 交错 更 新 过 程 。 对 在 i 之 后 的 状态 是 否 是 7 取 
条 件 ， 可 见 
EL 一 个 循环 中 的 “ 开 ” 时 ] = PEL(X;j 一 zx)1+] 
其 中 义 ;; 是 具有 分 布 Fi 的 随机 变量 ， 它 代表 作出 从 i 到 的 转移 的 时 间 ， 而 
y+ 二 max(0,y)。 因 此 
EL 循环 中 的 “ 开 ” 时 」= P,| P(Xy—z>a}da 
一 P,| Fulatz)da 
一 P,| Fdy 
因为 EL 循环 时 间 j] 二 ji;， 由 交错 更 新 过 程 理 论 保证 定理 之 结论 。 
用 同样 的 技巧 (或 将 (4. 8.2) 对 7 求 和 ) 我 们 可 以 证 明 下 列 


系 4. 8.5 
若 半 马尔 可 夫 过 程 不 可 约 且 是 非 格 点 的 ， 则 
(4. 8. 3) limP (ZC)=1i,Y(t)>7xIZ(0)=&k) 
=| Hdy/p 
注 记 


《1) 当然 ， 定 理 4. 8. 4 与 系 4.8.5 中 的 极限 概率 也 可 解释 为 
长 时 间 之 后 的 比率 。 例 如 ， 考 虑 这 样 的 时 刻 ， 其 时 半 马 尔 可 夫 过 
程 处 于 状态 :， 之 后 的 二 时间 内 无 转移 ， 而 后 将 转移 到 状态 7， 定 
理 4.8.4 给 出 了 长 时 间 之 后 这 种 时 刻 所 占 的 比率 。 

(2) 将 (4. 8.3) 冬 以 及 除 以 jj;， 和 且 利 用 Pi 二 jy/p:， 得 

limP (ZC(D)=i,Y (0)>7x)=PHi,.(z) 

其 中 已 .是 已 , 的 平衡 分 布 。 因 此 处 于 状态 i 的 极限 概率 是 
P， 且 已 知 上 时 的 状态 是 ;， 到 发 生 转 移 为 止 的 时 间 ( 当 上 趋 于 co) 
最 从 已 , 的 平衡 分 布 。 


习 奖 


1. 一 家 商店 使 用 如 下 的 (s,S) 定 货 策略 贮备 某 种 商品 ; 如 果 在 一 天 的 开始 其 
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供应 量 是 =， 则 它 定 购 
0， 当 工 之 4 
SS 一 Zz， 当 工 二 s 
定货 立即 被 满足 ， 每 天 的 需求 量 是 独立 的 ， 且 以 概率 w 取 值 7， 不 能 立即 
满足 的 一 切 需 求 皆 消失 。 令 X, 表示 在 第 ”天 结束 时 的 存货 水 平 ， 论 证 
{X。，n 之 1} 是 一 个 马尔 可 夫 链 ， 且 计算 其 转移 概率 。 
.对 一 个 瑟 尔 可 夫 链 证 明 : 
P {X=j|X, i HX, = =P{X,=j|X,, =i} 
当 吉之 nz 之 一 之 4 过 nn 时 皆 成 立 。 
. 证 明 : 如 果 状 态 的 个 数 是 wx， 且 如 果 状 态 7 可 从 状态 i 到达， 则 它 可 用 
步 或 更 少 的 步 数 到 达 。 
- 证 明 、 
Ps 二 DApy* 
- 证 明 : 对 称 随机 游 动 在 二 维 时 是 常 返 的 ， 而 在 三 维 时 是 滑 过 的 。 
- 对 从 0 出 发 的 对 称 随 机 游 动 : 
(a) 回 到 0 的 平均 时 间 是 多 少 ? 
Cb) 以 AN 记 到 时 刻 n 为止 返回 的 次 数 。 证 明 : 
| 令 )>-， 
Ce) 用 (b) 及 斯 特 林 近似 公式 证 明 : 对 很 大 的 x，E LN,] 与 Mx 成 比 
例 。 
. 设 人 II，X，… 是 独立 的 随机 变量 ， 使 得 已 t 居 :一 让 一 ao，7j20。 如 果 习 。> 
max 《 汪 1，…， 义 ,_1)， 其 中 Xo 二 一 品 ， 就 说 在 时 刻 n 产生 了 一 个 记录 。 
若 在 时 刻 n 产生 了 一 个 记录 ， 称 X; 为 记录 值 ， 以 R; 记 第 i 个 记录 值 。 
(a) 论证 ，{R;，i 之 1) 是 一 个 马尔 可 夫 链 ， 并 计算 其 转移 概率 。 
Cb) 以 TT; 记 第 i 个 与 第 i 十 1 个 记录 之 间 的 时 间 。{T;, 1 宇 1} 是 一 个 马尔 
可 夫 链 吗 ?{ (Ri,Ti),i 宇 1} 呢 ? 是 马尔 可 夫 链 时 ， 计 算 转移 概率 。 
. 如果 fi 过 1 及 万 二 1， 证 明 ， 


ELN, |= (2n 汪 1) 


_ 2P; 
(a) >》，P7<<oco Cb) fij = 0 
! 1+ DP’ 
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9. 转移 概率 矩阵 P 称 为 双 随 机 的 ， 若 对 一 切 7 


12. 


13. 


14. 


15. 


16. 


Sp,=1 
ti=0 


即 各 列 之 和 都 等 于 1。 若 一 个 双 随 机 的 链 有 ?= 个 状态 且 是 遍历 的 ， 计 算 其 
极限 概率 。 
10. 
11. 


证 明 : 正常 返 与 零 常 返 是 类 性 质 。 
证 明 : 在 一 个 有 限 马尔 可 夫 链 中 无 零 常 返 状 态 ， 且 不 可 能 所 有 的 状态 都 
是 非常 返 的 。 
在 M/G/1 系统 中 ( 例 4. 3(a)) 假 设 po<<1 从 而 平稳 分 布 存在 , 计算 x' (5)， 
有 目 令 s 一 1 取 极 限 求 和 yin。 
一 个 人 有 > 把 锌 用 于 上 下 班 ， 如 果 一 天 的 开头 (结束 ) 他 是 在 家 (办 公 室 ) 
中 而 且 天 下 雨 ， 只 要 有 伞 可 取 到 ， 他 就 拿 一 把 到 办 公 室 (家 ) 中 。 如 果 天 
不 下 十 ,那么 他 绝 不 带 伞 ， 假 定 一 天 的 开始 (结束 ) 下 雨 的 概率 为 p， 与 
过 去 的 情况 独立 。 
(a) 定义 一 个 有 7 十 1 个 状态 的 马尔 可 夫 链 , 有 助 于 我 们 确定 此 人 被 淋 湿 
的 次 数 的 比率 。 (注意: 如 果 天 下 雨 而 全 部 全 在 另 一 处 那么 他 要 被 淋 湿 。) 
(b》 计算 极限 概率 。 
(c) 占 多 少 比率 的 次 数 此 人 要 被 淋 湿 。 
考虑 一 个 正常 返 不 可 约 周 期 马尔 可 夫 链 , 且 以 xj 记 长 时 间 之 后 处 于 状态 
7，J 之 0, 的 时 间 的 比率 。 证 明 :z,j 宇 0, 满 足 x= riPs, = 1。 
一 个 马尔 可 夫 链 有 一 个 吸收 状态 0 ( 即 Pw 二 1) 与 滑 过 状态 1, 2, …, 设 
Z; 是 链 从 i 出 发 到 达 状 态 0 的 时 间 ， 且 令 M;=E[T.], i>>0， 
(a) 证 明 、 
Mi 一 1 十 > ,PVA 
(b) 令 ca) 一 已 { 人 72 。 导 出 用 GD， J>0， 表 示 o; tn 十 1) 的 一 个 公 
式 。 
考虑 一 个 具有 状态 0，1，2，… 的 马尔 可 夫 链 ， 其 转移 概率 : 
Piiti= pi=1— Pi 
其 中 po 二 1。 找 出 为 使 链 正常 返 诸 p; 满足 的 充 要 条 件 ， 且 就 这 种 情况 计 
算 其 极限 概率 。 
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17. 


1 


的 


19. 


20. 


在 赌 徒 输 光 问题 中 ， 从 i 元 开始 直到 赌 徒 到 达 0 或 元 为 止 , 计算 赌局 
的 平均 次 数 。 


.在 赌 徒 输 光 问题 中 证 明 : 


P {他 在 下 一 局 赌博 中 赢 | 目 前 的 赌 金 为 i， 他 最 终 达 到 AN 元 ) 
| [一 (q/p) 1] /TI 一 (jp 车 p 关 六 


G+1) /2 车 力 一 方 


每 天 个 元 素 中 的 一 个 被 需求 ; 第 : 个 被 需求 的 概率 为 Pi, i 宇 1，>P; 

一 1。 这 些 元 素 总 是 被 排 成 有 次 序 的 名 册 , 且 它 的 变动 如 下 : 被 挑选 到 的 

元 素 移 到 名 册 的 最 前 面 ， 而 所 有 其 它 元 素 的 相对 位 置 不 变 。 定 义 在 任意 

时 刻 的 状态 是 该 时 刻 名 册 的 次 序 。 

(a) 论证 上 述 过 程 是 一 个 马尔 可 夫 链 。 

Cb) 对 任意 的 状态 训 ,… ,is( 它 是 1,2,… ,zn 的 一 个 置换 ), BzGiy，…， i,) 
记 极 限 概率 。 证 明 : 


PP. 
La 9 in) (1 一方 1 一 已 一 已 一 一 PP 


假设 两 个 独立 序列 六!，X,，… 与 Y，Y;，… 来 自 某 个 实验 室 , 它们 代表 
着 成 功 概率 Pi 与 P, 未 知 的 贝 努 里 试验 即 P(X 一 1) 一 1 一 
P{X; 一 0) 二 Py, PlY; 一 1} 一 1 一 PlY; 一 0} 二 P;， 且 所 有 的 随机 变量 是 独 
立 的 。 为 了 确定 户 >P 还 是 已 之 Pi ， 我 们 用 下 列 检 验 法 。 选 取 某 个 正 
整数 M， 且 在 N 停止 ，N 是 使 得 

Xi 十 … 十 一 《六 十 … 十 Y,) 一 M 

或 

Xi 十 十 六 一 《六 十 十 Y,) 一 一 M 
的 第 一 个 的 值 . 在 前 一 情形 我 们 就 断定 Pi 之 P,, 而 在 后 一 种 情形 就 断 
定 P:>P; .证 明 : 当 己 之 P; 时 ， 犯 错误 的 概率 〈 即 P: 之 P,) 是 


P{ 错 误 } 一 了 


而 被 观察 的 数 对 的 个 数 之 平均 值 是 


MOAM— 1) 


ELNjJ= (Pi—P,) (CAM+1) 


» 156。 


21. 


22. 


23. 


24. 


其 中 
_ Pi(1—P,) 
~ P,(1—P)) 
(提示 : 将 问题 与 赌 徒 输 光 问题 联系 起 来 ) 。 
捕捉 苍蝇 的 一 只 蜂 蛛 依循 一 马尔 可 夫 链 在 位 置 1 与 2 之 间 移 动 ， 其 起 始 


位 置 为 1, 转移 征 阵 为 | 。， ”| ， 未 知觉 到 岗 红 的 苍蝇 的 初始 位 置 为 


2， 并 依照 转移 矩阵 为 | ，。 “| 的 马尔 可 夫 链 移动 ， 只 要 它们 在 同一 
位 置 相遇 ， 蜂 蛛 就 提 住 苍蝇 从 而 结束 捕 提 。 

证 明 ; 捕捉 的 过 程 ， 除 非 知道 它 结束 时 的 位 置 ， 可 用 三 个 状态 的 马尔 可 
夫 链 来 描述 ， 其 中 一 个 是 吸收 状态 代表 捕捉 结束 ， 而 另外 的 两 个 代表 蜂 
蛛 与 苍蝇 处 在 不 同 的 位 置 ， 对 此 链 求 转移 概率 矩阵 。 

求 在 时 刻 蝎 蛛 与 苍蝇 都 处 于 各 自 的 初始 位 置 的 概率 。 

捕捉 过 程 的 平均 持续 时 间 是 多 少 ? 

考虑 整数 点 上 的 一 个 简单 随机 游 动 ， 其 中 一 质点 每 一 步 朝 正方 向 移动 一 
步 的 概率 为 p»， 朝 负 方 向 移动 一 步 的 概率 也 为 p， 而 以 概率 g 一 1 2p 
(0<p<< 志 〉 留 在 原 处 ， 假 设 在 原点 放置 一 个 吸收 辟 ( 即 Po 一 1)， 而 在 


六 处 放 一 反射 壁 “ 即 Pw,n-_1 王 1)， 又 质点 起 始 于 n (0<n<=N)。 
证 明 : 质点 被 吸收 的 概率 为 1。 且 求 被 吸收 所 需 的 平均 步 数 。 
给 定 :X",n 之 0} 为 一 分 支 过 程 : 
(a) 论证; X, 或 收敛 于 0 或 趋 于 无 穷 。 
(b) 证 明 ; 
2,n-1 1 
Var(X, IXo=1) = 人 人 1 者 1 
MI ， 车:==1 
其 中 与 o 是 一 个 个 体 的 后 代 个 数 的 均值 和 方差 。 
在 一 分 支 过 程 中 每 个 个 体 的 后 代 个 数 具有 二 项 分 布 ， 其 参数 是 2, p。 从 
一 个 个 体 开 始 ， 计算 : 
(a) 灭绝 的 概率 ; 
(b〉 到 第 三 代 群 体 首次 灭绝 的 概率 。 
假设 开始 时 不 是 一 个 个 体 , 初始 的 群体 总 数 Z。 是 一 随机 变量 , 服从 
均值 为 * 的 泊 松 分 布 。 证 明 : 此 时 ， 对 zz>>1/2， 灭 绝 概率 为 
。 527， 


25. 


人 


27. 


28. 


29. 


exp {4(1—2p)/p’} 


对 于 4. 6. 1 节 中 的 马尔 可 夫 链 模型 ， 即 

Pu 一 二 1， 1 一 1，…，z7 一 |， i>1 
假设 初始 状态 是 =| ”| ， 其 中 m>mm。 证 明 ; 当 ，， mm 与 4 一 吉 很 大 时 
从 状态 NN 到 达 1 的 步 数 渐 近 地 具 有 泊 松 分 布 ， 其 均值 为 


m [clog 一 +log(c 一 D] 


其 中 c==n/m。( 提 示 : 用 斯 特 林 近 似 公式 。) 
26. 


对 于 任意 的 无 穷 序 列 xz1!，x:，…， 每 当 序 列 增 减 的 方向 变换 ， 我 们 就 说 
一 个 新 的 长 游程 开始 了 。 辟 如 ， 硅 序列 开头 为 5,， 2, 4, 5,，6,，9,，3, 4， 
那么 其 中 有 三 个 长 游程 一 一 即 (65，2)》，(4，5，6，9》， 与 (3，4) 。 设 六 ， 
X，… 是 独立 的 (0,1) 均 匀 分 布 随 机 变量 ， 以 忆 记 第 x 个 长 游程 的 初始 
值 , 论证 : (1,，n 宇 1} 是 一 具有 连续 状态 空间 的 马尔 可 夫 链 ， 其 转移 概 
率 密 度 为 : 
ply|zx)=e! +e —eb 一] 

考虑 在 例 4. 7() 中 给 出 的 名 册 模 型 。 在 移 前 一 位 的 规则 下 ,利用 时 间 可 
逆 性 证 明 : 元 素 7 在 i 之 前 的 极限 概率 ( 记 为 P14 在 i 之 前 }) 满足 


P. 
Pj 在 i 之 前 ) > 万 TE 。 当 P>Pi 时 


设 有 有 个 位 置 ， 对 全 部 | "| 对 位 置 的 每 对 , 给 定 了 一 个 正 数 d=d;。 一 


质点 依照 如 下 规则 移动 位 置 : 在 任 一 时 刻 ， 若 此 质点 在 位 置 ! 上 ， 那 么 
下 一 步 它 将 移动 到 位 置 7 的 概率 已, 为 : 
d 


4; 


Ji 


证 明 : 位 置 的 序列 是 时 间 可 逆 的 马尔 可 去 链 ， 并 求 极 限 概率 ， 


考虑 一 个 具有 转移 概率 Pi 及 极限 概率 x 的 时 间 可 道 马 尔 可 夫 链 ; 现在 
考 虚 状态 截 到 0，1，…，M 为 止 的 链 ; 也 即 ， 截 尾 链 的 转移 概率 P;j 是 
Pi/ DSPs, 0<7， J< Ad 
0， 其 它 
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30. 


31. 


32, 


33. 


证 明 : 此 截 尾 链 也 是 时 间 可 逆 的 且 其 极限 概率 为 


证 明 : 车 一 个 有 限 状态 的 遍历 马尔 可 夫 链 满足 对 一 切 i 关 j, Po>0, 则 它 
是 时 间 可 道 的 当 且 仅 当 对 于 一 切 i，j, 有 有 
P,PiPs= PuaPyP; 

以 {XX,,n 之 1} 记 具有 可 数 状 态 空间 的 一 个 不 可 约 马 尔 可 夫 链 。 今 考虑 一 
新 的 随机 过 程 {Y., n 宇 0}, 它 只 接纳 原 马 尔 可 夫 链 的 第 4 个 在 0 与 N 之 
间 的 值 。 例如 , 若 六 一 3， 且 一 1，X2 一 3，X 一 5，X 一 6，X5 一 2， 则 
Y=1, Ys=3, Ys=2, 
(a) ty-，? 之 0)】 是 一 个 马尔 可 夫 链 吗 ? 简要 地 解释 。 
(b) 以 记 {X,，n 之 1} 处 于 状态 j 的 时 间 的 比率 。 如 果 对 一 切 j, x 
0， 问 {Y,, x 之 0} 处 于 状态 0，1，… 中 的 每 一 个 的 时 间 比 率 是 多 
少 ? 
假设 {X,} 是 零 常 返 的 ， 且 以 tCN), i 二 0，1，…，N， 记 {Y,，n 实 
0} 长 时 间 之 后 处 于 状态 i 的 时 间 的 比率 。 证 明 : 
X(N) 一 x CN)ELX 过 程 在 两 次 到 达 i 之 间 处 于 j 的 时 间 ]，j 了 i。 
(d) 用 (c) 去 论证 , 在 一 个 对 称 随 机 游 动 中 , 在 返回 到 原点 之 前 到 达 状 

态 ; 的 平均 次 数 等 于 1 。 
(e) 如 果 {X,,n 之 0} 是 时 间 可 道 的 ,证 明 {Y,,n 宇 0} 亦 然 。 
开始 M 个 球 被 分 布 在 m 个 色 中 ,每 次 随机 地 从 中 抽取 一 球 , 不论 从 哪 一 
负 中 取出 它 被 随机 地 放 信 其余 mm 一 1 个 后 中 ， 考 虑 状态 为 向 量 (ni， ns， 
…nm) 的 马尔 可 夫 链 ， 其 中 ni 表示 在 钠 i 中 的 球 数 。 对 此 马尔 可 夫 链 猜 
测 其 极限 概率 ,而 后 验证 你 的 猜测 ， 且 同时 证 明 此 马尔 可 夫 链 是 时 间 可 
逆 的 。 | 
对 一 个 遍历 的 半 马 尔 可 夫 过 程 ， 
(a) 计算 此 过 程 从 : 到 j 转移 的 比率 。 
(b) 证明 : 


(c 


Ne 


Ps/ p= 1/p 
(c) 证 明 : 过程 处 于 状态 i 且 接 下 来 在 时 间 z 内 转移 到 j 的 时 间 的 比率 为 
。 159。 


Pp/ yz， 其 中 3; 二 王 Fi dt. 
(d) 证 明 :， 处 于 状态 i 且 接 下 来 在 时 间 z 内 转移 到 j 的 时 间 的 比率 为 
Hips (7) 
其 中 Fi 是 F; 的 平衡 分 布 。 

34. 对 遍历 半 马 尔 可 夫 过 程 , 推导 出 : 已 知 X()==i 时 , 在 1 之 后 到 达 的 下 一 
个 状态 是 7 的 条 件 概率 ， 在 上 ~ce 时 的 表达 式 。 

35. 一 出 租 汽车 流动 于 三 个 位 置 之 间 。 当 它 到 达 位 置 1 时 然后 等 可 能 地 去 2 
或 3。 当 它 到 达 2 时 ， 接 着 它 将 以 概率 1/3 到 1 而 以 概率 2/3 到 3。 从 3 
总 是 开 往 1。 在 位 置 i 与 ; 之 间 的 平均 时 间 是 1 二 20, ti 二 30, tss 二 30 
(tij =1i)o 

此 出 租 汽车 最 近 停 的 位 置 为 i 的 (极限 ) 概 率 是 多 少 ? i 二 1，2，3。 

此 出 租 汽车 朝 位 置 2 开 的 (极限 ?概率 是 多 少 ? 

有 多 少 比 例 的 时 间 此 出 租 汽车 是 从 2 开 到 3? 注意 : 此 出 租 汽车 一 到 达 
一 个 位 置 立 即 就 又 开 出 。 
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连续 时 间 马 尔 可 夫 链 
5.1 引言 


本 章 中 我 们 考虑 与 离散 时 间 马 尔 可 夫 链 类 似 的 连续 时 间 马 尔 
可 夫 链 。 如 离散 情形 一 样 ， 它 们 由 马尔 可 夫 性 刻 划 ， 即 已 知 现在 
的 状态 时 将 来 与 过 去 独立 。 

在 5.2 节 中 ， 我 们 定义 连续 时 间 马 尔 可 夫 链 且 把 它们 与 第 四 
章 的 离散 时 间 马 尔 可 夫 链 相 联 系 。 在 5. 3 节 中 ， 我 们 引入 一 类 重 
要 的 连续 时 间 马 尔 可 夫 链 ， 即 所 谓 生 灭 过 程 。 这 些 过 程 可 用 作 在 
任何 时 刻 其 总 量 的 变化 仅 为 一 个 单位 的 群体 的 模型 。 在 5.4 节 中 ， 
我 们 导出 两 组 描述 系统 的 概率 规律 的 微分 方程 一 一 辐 前 与 回 后 方 
程 .5.5 节 的 内 容 是 确定 连续 时 间 马 尔 可 夫 链 的 有 关 的 极限 (或 长 
时 间 后 的 ) 概率 。 在 5. 6 节 中 ,我 们 考虑 时 间 可 逆 的 问题 。 其 中 ， 
我 们 证 明 一 切 生 灭 过 程 是 时 间 可 逆 的 ， 而 后 阐明 这 事实 对 于 排队 
系统 的 重要 性 。 在 这 一 节 中 也 提供 了 时 间 可 逆 性 对 随机 群体 模型 
的 应 用 。 在 5.7 证 中， 我 们 曾 明 逆向 链 的 重要 性 ， 即 使 过 程 不 是 
时 间 可 逆 的 。 利 用 它 我 们 研究 排队 网 络 模型 ， 导 出 爱 尔 朗 消 失 公 
式 ， 分 析 共 用 加 工 系统 。5. 8 节 中 我 们 表明 如 何 “ 一 致 化 ”马尔 可 
夫 链 一 一 对 于 数值 计算 有 用 的 一 种 技巧 。 
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$.2 连续 时 间 马 尔 可 夫 链 


考虑 取 非 负 整 数值 的 连续 时 间 随 机 过 程 {(X(2) ,t 之 0} ,与 第 四 
章 中 给 出 的 离散 时 间 马 尔 可 夫 链 的 定义 类 似 , 过程 {X(z) ,i 宇 0} 称 
为 连续 时 间 马 尔 可 夫 链 ， 如 果 对 一 切 s, :之 0 及 非 负 整数 i j 
ZU) ,0<xS*， 有 

P{X(t+s)= 7|X(G) =i,X() 一 0 二 < 

一 己 (XG 十 SS) =j|IX() 一 了) 

换言之 ， 连 续 时 间 马 尔 可 夫 链 是 具有 马尔 可 夫 性 的 随机 过 程 ， 即 
已 知 现在 s 时 的 状态 及 一 切 过 去 的 状态 的 条 件 下 在 将 来 时 刻 t 十 s 
的 状态 的 条 件 分 布 只 依赖 现在 的 状态 而 与 过 去 独立 ,车 又 有 了 P 了 {X 
(十 5) 二 7XC) 二 引 与 无关 则 称 连续 时 间 马 尔 可 夫 链 具有 平稳 
的 或 齐 次 的 转移 概率 。 将 假定 我 们 所 考虑 的 马尔 可 夫 链 都 有 平稳 

假设 在 某 时 刻 ， 比 如 说 时 刻 0， 马 尔 可 夫 链 进入 状态 ;， 而 且 
假设 在 接 下 来 的 ;个 单位 时 间 中 过 程 未 离开 状态 i 〈 即 未 发 生 转 
移 )。 在 随后 的 i 个 单位 时 间 中 过 程 仍 不 离开 状态 i 的 概率 是 多 少 
呢 ? 为 了 回答 这 个 问题 ， 注 意 到 因为 在 时 间 * 过 程 处 于 状态 i， 从 
马尔 可 夫 性 得 在 区 闻 Ls, s 十 tj 中 它 仍然 处 于 状态 i 的 概率 正 是 它 
处 于 状态 i 至 少 上 个 单位 时 间 的 (无 条 件 ) 概 率 。 也 即 若 以 = 记过 
程 在 转移 到 另 一 状态 之 前 停留 在 状态 : 的 时 间 ， 则 对 一 切 s, t 宇 0 
有 

Plt 之 stlt>s} = P{r > i} 

因此 ， 随 机 变量 = 是 无 记忆 的 必 有 指数 分 布 。 

事实 上 ， 上 面 的 讨论 给 了 我 们 构造 连续 时 间 马 尔 可 夫 链 的 一 
个 方法 。 也 即 它 是 一 个 具有 如 下 性 质 的 随机 过 程 ， 每 当 它 进入 状 
态 :: 

(GD 在 转移 到 另 一 状态 之 前 处 于 状态 i 的 时 间 服 从 指数 分 布 ， 
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参数 为 5; 

4Gi) 当 过 程 离开 状态 时 ， 接 着 以 某 个 概率 ， 璧 如 Pu， 进 入 
状态 )， > ,Pi 一 1。 

x 一 co 的 状态 ; 称 为 瞬时 状态 , 因为 一 旦 进入 此 状态 立即 就 离 
开 。 尽 管 这 种 状态 在 理论 上 是 可 能 的 ， 我 们 将 始终 假设 对 一 切 i， 
Oo<w<co。( 如 果 * 一 0, 则 称 状态 i 为 吸收 的 , 因为 一 旦 进入 这 一 
状态 就 永 不 再 离开 了 .) 因此 , 实际 上 一 个 连续 时 间 马 尔 可 夫 链 是 
一 个 这 样 的 随机 过 程 ， 它 按照 一 个 (离散 时 间 ) 的 马尔 可 夫 链 从 一 
个 状态 转移 到 另 一 个 状态 ， 但 在 转移 到 下 一 状态 之 前 ， 它 在 各 个 
状态 停留 的 时 间 服 从 指数 分 布 。 此 外 在 状态 i 过 程 停留 的 时 间 与 
下 一 个 到 达 的 状态 必须 是 独立 的 随机 变量 。 因 为 若 下 一 个 到 达 的 
状态 依赖 于 r+;， 那 么 过 程 处 于 状态 i 已 有 多 久 的 信息 与 下 一 个 状 
态 的 预报 有 关 一 一 这 就 与 马尔 可 夫 假定 矛盾 了 。 

一 个 连续 时 间 马 尔 可 夫 链 称 为 规则 的 ， 若 以 概率 1 在 任意 有 
限时 间 内 的 转移 次 数 是 有 限 的。 一 个 非 规则 的 马尔 可 夫 链 的 例子 
是 


P;;1 = 1,， 六 一 于 

能 够 证 明 这 个 马尔 可 夫 链 总 是 从 状态 上 到 i 十 1， 停 留 在 状态 i 的 
时 间 服 从 均值 为 1/ 的 指数 分 布 ， 它 将 以 正 的 概率 在 任意 长 为 +， 
4 一 0) 的 时 间 区 间 内 作 无 限 多 次 转移 。 然而 我 们 从 现在 起 将 假设 
所 考虑 的 全 部 马尔 可 夫 链 是 规则 的 (在 习题 中 将 给 出 规则 性 的 某 
些 充 分 条 件 ) 。 

对 一 切 : 夭 )，0% 定 义 为 

qi; = v,P, 

因为 * 是 过 程 离 开 状态 i 的 速率 而 已, 是 它 转移 到 7 的 概率 ， 所 以 
qs 是 过 程 从 状态 i 转移 到 状态 j 的 速率 ; 事实 上 我 们 就 称 gj 是 从 i 
到 7 的 转移 速率 。 

以 Pi (t) 记 马 尔 可 夫 链 现在 处 于 状态 i, 再 经 过 一 段 时 间 : 后 
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处 于 状态 7 的 概率 ， 即 


$.3 ” 生 灭 过 程 


具有 状态 0，1，… 的 连续 时 间 马 尔 可 夫 链 称 为 生 灭 过 程 ， 若 
li 一 j| 之 1 时 gj 一 0。 于 是 一 个 生 灭 过 程 是 一 个 连续 时 间 马 尔 可 夫 
链 , 具有 状态 0, 1…，, 它 从 状态 i 只 能 转移 到 状态 i 一 1 或 i 十 1。 过 
程 的 状态 通常 看 作为 某 个 群体 的 总 量 ， 当 状态 增长 1 时 ， 我 们 就 
说 生 了 一 个 ; 而 当 它 减少 1 时 ,我们 就 说 死 了 一 个 。 设 入 与 4 为 

A = qiiti 
Hi dii—l 


值 {4%,i 汪 0} 与 ({p6,i 之 1} 分 别称 为 生长 率 与 死亡 率 ， 因 为 之 4; 一 
2 可 见 


v= 


因此 , 我 们 可 以 这 样 设想 生 灭 过 程 , 每 当 系 统 中 有 i 个 人 时 , 直到 
下 一 次 出 生 的 时 间 服 从 参数 为 本 的 指数 分 布 ， 且 独立 于 直到 下 一 
次 死亡 的 时 间 ， 它 服从 参数 为 上 的 指数 分 布 。 

例 5.3 (a) 两 个 生 灭 过 程 。 

(i) M/M/s 排队 系统 。 假 设 顾 客 按照 参数 为 4 的 泊 松 过 程 来 到 一 个 有 
个 服务 员 的 服务 站 ,- 即 相继 来 到 之 间 的 时 间 是 均值 为 1/4 的 独立 指数 随机 变 
量 ， 每 个 顾客 一 来 到 ， 如 果 有 服务 员 空 闲 ， 则 直接 进入 服务 ,否则 此 顾客 要 
加 入 排队 行列 ( 即 他 在 队列 中 等 待 ) 。 当 一 个 服务 员 结束 对 一 位 顾客 的 服务 
时 ,顾客 便 离 开 服 务 系 统 , 排队 中 的 下 一 个 顾客 ( 若 有 顾客 在 等 待 ) 进 入 服务 。 
假定 相继 的 服务 时 间 是 独立 的 指数 随机 变量 ,均值 为 /x。 如 果 我 们 以 
(2) 记 时 刻 t 系统 中 的 人 数 , 则 {XC),t 宇 0) 是 生 灭 过 程 ， 

ng, 1 委 7 委 5 
3SH， ns 
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A = n 尝 0 
(i) 有 寺 和 的 线性 增长 术 型 

jn 一 np, n 之 1 

A, 二 nA 十 0， 2 之 10 
的 模型 称 为 有 迁 入 的 线性 增长 模型 .这 种 过 程 自 然 地 产生 于 生物 繁殖 与 群体 
增长 的 研究 中 。 假定 群体 中 的 每 个 个 体 以 指数 率 4 出 生 ; 此 外 ， 群体 由 于 从 
外 界 迁 入 的 因素 又 以 指数 率 0 增加， 因此 在 系统 中 有 mn 人 时 ， 整个 出 生 率 是 
nn4 十 89。 假定 此 群体 的 各 个 成 员 以 指数 率 y& 死亡 ， 从 而 二 ny。 

看 对 一 切 ma A 一 0《 即 铬 死亡 是 不 可 能 的 ), 则 生 灭 过 程 称 为 
纯 生 过 程 。 最 简单 的 纯 生 过 程 的 例子 是 泊 松 过 程 ， 它 具有 常 值 出 
生 率 太一 4，72 过 0。 

第 二 个 纯 生 过 程 的 例子 是 这 样 的 ， 在 一 个 群体 中 各 个 成 员 独 
立地 活动 且 以 指数 率 4 生 育 . 若 假设 没有 任何 成 员 死 亡 , 以 X( 妃 记 
时 刻 1 群体 的 总 量 , 则 {XG),t 宇 0} 是 一 个 纯 生 过 程 ,其 

人 :一 nN, 7 之 0 
此 纯 生 过 程 被 称 为 尤 尔 过 程 。 

考虑 一 尤 尔 过 程 ， 在 时 刻 0 从 一 个 个 体 开 始 ， 且 以 也 (i 二 
1) 记 第 i 一 1 个 与 第 i 个 出 生 之 间 的 时 间 。 即 7; 是 群体 总 量 从 i 变 
到 i 十 1 所 花 的 时 间 。 从 尤 尔 过 程 的 定义 容易 得 到 了， 《之 1) 是 独 
立 的 ， 且 7; 是 具有 参数 4 的 指数 变量 。 现 在 

P{T<t}=1—~e ” 


P{T, + 7T, < | Pt + T,<uT, = rhe*dr 
= ja ~ era-D)he-adz 
= (1 一 e *)? 
PITi+ Te tT SH= | PT + T+ TT <HT +T7, 
= zjdFr tr(z) 
— ja _ era-a)2Me-z(L — ex)dr 
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= (1 一 e *)’ 
一 般 地 可 用 归纳 法 证 明 
P{Ti 二 下 二 Tt1} = 0 一 ee *)’ 
因此 ,由 了 {Ti 十 … 十 Tj 二? = 二 P(XG) 之 十 11XC00) 二 1) 可 见 对 于 
一 个 尤 尔 过 程 ， 
P(t)= (1 —e ”lo (~ ee *) 
= ee *(] — ee *)7!, J 之 1] 
从 上 可 见 ， 从 一 个 个 体 开 始 , 在 时 刻 上 群体 的 总 量 有 几何 分 布 , 其 
均值 为 e”。 因此 如 果 群 体 从 7 个 个 体 开始 , 在 时 刻 上 其 总 量 是 i 个 
独立 同 几 何 分 布 随机 变量 之 和 ， 有 负 二 项 分 布 ， 也 即 对 尤 尔 过 程 
7 一 1 
1:—1 
关于 从 一 个 个 体 开始 的 尤 尔 过 程 的 另 一 个 有 趣 的 结果 涉及 时 
刻 t 的 群体 总 量 给 定时 出 生 时 刻 的 条 件 分 布 。 因 为 第 i 个 出 生 在 
时 刻 $; 夺 十 … 十 Ti 发生 ,所 以 我 们 计算 已 给 XC 二 =n 十 1 时 5)， 
…，5S; 的 条 件 联合 分 布 。 直 观 地 推导 ， 并 将 密度 当 作 概 率 处 理 可 
得 ， 对 0s1 寺 5s 二 "二 5 全 
PI{S, = sd = ss 1, = 5 |XG)=nt+1} 
加 PIT = $9T, = 5 — $0 TT, = 5 ST > ss,) 
PIX()=n+1)} 
_ he 2he Mende Nn Ve mt DA) 
P{X(t)=n+1)} 
一 Ce XsDe a sg As,) 
其 中 C 是 某 个 不 依赖 于 s1，…s 的 常数 。 因 此 我 们 看 到 ， 给 定 
(1) 二 nn 十 1 时 S11，…，S, 的 条 件 密度 为 
(5. 3.1) 


P(t) 一 | e 人 (一 em 一， jj 之 i 之 1 


f(si 9"** on ijn 二 1)=n! [lz 9 O05 


其 中 了 是 密度 函数 
“ 167， 


(5. 3.2) 


Ae™ 2) 
reo-| l—e™ 
0 ， 其 它 
但 是 因为 (5. 3. 1) 是 二 个 密度 为 了 的 随机 变量 的 一 个 子 样 的 顺序 
统计 量 的 联合 密度 函数 \ 参 阅 第 二 章 2. 3 节 ) 。 于 是 我 们 证 得 
命题 5. 3.1 
考虑 一 个 尤 尔 过 程 , 其 X(0) 王 1, 则 给 定 X(GD) 一 2 十 1 时 , 出 生 
时 刻 Sd1, S52 sO, 的 分 布 如 同 取 自 密度 为 (5. 3.2) 的 母体 的 容 
量 为 ”的 子 样 的 顺序 统计 量 的 分 布 。 
命题 5. 3. 1 可 用 来 以 同样 的 方法 对 尤 尔 过 程 建 立 与 泊 松 过 
程 相应 的 结果 。 
例 5.3 \b) 考虑 一 尤 尔 过 程 ， 其 X(0) 王 1。 让 我 们 计算 在 时 刻 上 群体 
诸 成 员 的 年 龄 之 和 的 均值 。 时 刻 上 诸 年 龄 之 和 ， 记 为 4)， 可 表示 为 
AG) = ao 十 ; TS — Si) 
其 中 a 是 初始 个 体 在 1 一 0 时 的 年 龄 。 为 计算 EL4C2)], 对 XG) 取 条 件 


EL[ACQ)IXO) =n+1]=at+t+ ED GG — S)IX(G)=nt1] 
t=1 


0 三 zt 


Ae™ ir) 


at ttn| Gz) 


本 


或 
、 1 一 e “*“— Me * 
ELACQ)IXG)1 一 ao 十 上 十 (CXGD) 一 1) A 
取 期 望 且 由 (2) 有 均值 e* 得 
4 
E[ A(z)]= ao 十 上 十 人 一 一 


ev 一 1] 


一 ay 十 


其 它 与 4() 有 关 的 量 ， 例 如 它 的 母 函 数 可 按 同样 的 方法 计算 。 

上 面 上 LAQ)] 的 公式 可 用 下 面 的 恒等式 加 以 验证 ， 此 式 的 证 明 留 作 一 
个 练习 ， 
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(5. 3. 3) A(D) =aot| XC)ds 


取 期 望 得 
E[AG)]= ao + EL| XC)ds- 


+ | ELX G0 (因为 X(s) 之 0) 


一 Qo 十 | ea 
e“ 一 1 
一 Co 十 一 A 

下 面 的 例子 提供 了 纯 生 过 程 的 另 一 种 解释 。 
例 $.3(c) 一 个 简单 的 传染 模型 。 考 虑 有 m 个 个 体 的 群体 ,在 时 刻 0 
由 一 个 已 感染 的 个 体 与 mr 一 1 个 未 受到 感染 但 能 被 感染 的 个 体 组 成 . 个 体 一 
日 受到 感染 将 永远 地 处 于 此 状态 ,假设 在 任意 的 长 为 的 时 间 区 间 内 任意 一 
个 已 感染 的 人 将 以 概率 呈 十 ol4) 引 起 任 一 指定 的 未 被 感染 者 成 为 已 感染 
者 。 阁 我 们 以 关 () 记 时 刻 : 群体 中 已 受 感染 的 个 体 数 , 则 {XC),t 宇 0} 是 一 纯 

生 过 程 ， 其 


(m 一 72)72C， n=1,…,m— 1 
0， 其 它 
这 是 因为 当 有 个 已 受 感染 的 个 体 时 则 mx 一 n 个 未 受 感 染 者 的 每 一 个 将 以 
速率 na 变 成 已 感染 者 。 
以 了 记 直 至 整个 群体 被 感染 的 时 间 ， 则 T 能 表示 为 


m— 1 
T= OT, 


其 中 工 ; 是 从 i 个 已 感染 者 到 i 十 1 个 已 感染 者 的 时 间 . 因为 是 独立 指数 随 
机 变量 ， 其 参数 分 别 为 = (mm 一 ?ia，;i 一 1，…， 天 一 1， 可 见 


| 


及 


对 规模 合理 的 群体 ，E[T] 渐 近 地 为 
BLTJ= 2 十 十 | 
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A 
ma 82 一 下 mo 


| 1 上 1 2loglm 一 1) 
1 t | 


5.4 ”和 柯 尔 莫 哥 洛 夫 微 分 方程 


记得 
PCGD) = P{XG + s) = jIXG) 一 了 
代表 过 程 目 前 处 于 状态 i 在 时 间 上 之 后 将 处 于 状态 7 的 概率 。 
利用 马尔 可 夫 性 , 我 们 将 导出 两 组 Pi; (2) 的 微分 方程 , 它们 
有 时 可 求 得 显 式 解 。 但 在 此 之 前 需要 下 面 的 引 理 。 
引 理 5. 4.1 


(i) lim 1 一 人 OD, 
ft—0 i 
(11) lim ~ =gij;, 7 天 7 
引 理 5. 4. 2 
对 一 - 切 Ss» 1， 
Pi(t + s) = >,Pa(t) Ps) 


引 理 5. 4. 1 从 如 下 事实 (它们 必须 加 以 证 明 ) 可 得 ， 在 时 间 z 
内 有 两 次 或 更 多 次 转移 的 概率 是 o(z); 而 引 理 5. 4. 2, 它 是 离散 时 
间 马 尔 可 夫 链 的 切 普 曼 - 一 柯 尔 英 哥 洛 夫 方 程 的 连续 时 间 的 翻 
版 ， 直 接 从 马尔 可 夫 性 来 推 得 。 证 明 的 细节 留 作 练习 。 

从 引 理 5. 4. 2 我 们 得 到 


Pi(t +h) = ,Pa(h)P,d) 


=0 
或 等 价 地 ， 
Pi(t + hh) — PG) = > Pah)P,t) — [1 一己 (hCG) 
ki 
除 以 而 后 令 h->0 取 极 限 ， 应 用 引 理 5. 4.1 得 
(5. 4. 1 ) 
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lim i =lim > ， 人 PC 一 wP，G) 


h—0 hr0 人 h 
假定 在 (5. 4. 1) 入 有 边 可 交 折 匀 限 与 求 和 再 用 引 理 5. 4. 工 ,于 
是 得 到 下 面 结论 。 


定理 5. 4. 3 〈 柯 尔 莫 哥 党 夫 问 后 方程 ) 对 一 切 :，j 及 i 之 0， 
P',;(t) 一 > qaPy tt) 一 vPi(t) 


ki 
证 明 ”为 完成 证 明 必 须 论证 (5. 4. 1) 右边 极限 与 求 和 可 交换 次 序 . 现 
在 ， 对 于 任意 固定 的 入 ， 
liminf 2, F 2 Po (之 liminf >, < a “Pu Ci) 


LN 


一 sq P(t) 
ZN 


因为 上 式 对 一 切入 成立， 可 见 
(5. 4. 2) 


， ~ Pilh 
lim in 之， 全 2 PP，(D) 之 > quaPi(t) 
0 ki ki 


为 了 倒转 不 等 式 ， 注 意 对 于 人 >， 由 于 Ps(2) 志 1, 所 以 


Ph 
limsup 之 ， 人 2 p, G2) 
hr ki 


limsup | 2 合生 Pu) 十 > -ae) | 
hd bz kN 


RN 


. Ph 
<limsup| > 和 Rp )+ >， | 
kr 


Fd 


RN gMN 
= > gaPy() + 一 之 
Pa lzh 


其 中 最 后 的 等 式 由 引 理 5. 4. 1 而 得 。 因 上 列 不 等 式 对 一 切 N>i 成 立 ， 令 
NN 一 有 上 且 用 之 /9 一， 我 们 即 得 


Ph 
limsup 2 Cp, (2) 委 Ps (£) 


下 下 
上 式 连同 (5. 4. 2) 证 明了 
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lim > ， “2 pC) 一 > qaPwtt) 
二 


定理 5.4. 3 得 证 。 

定理 5. 4. 3 中 Pu() 满足 的 微分 方程 组 以 柯 尔 莫 哥 洛 夫 向 后 
方程 著称 。 称 它们 为 向 后 方程 ， 是 因为 在 计算 时 刻 : 十 六 的 状态 的 
概率 分 布 时 我 们 对 退 后 到 时 刻 疡 的 状态 取 条 件 ， 即 我 们 从 

Pi(t +h)= DP{XGh) = j|X(0) = 7, 


k=0 
X(h) = EYP{X(h) = EkIX(O0) = 7) 
= Py) Palh) 
天 一 


开始 计算 。 
对 时 刻 t 的 状态 取 条 件 , 我 们 可 以 导出 另 一 组 方程 , 称 柯 尔 葛 
哥 洛 夫 向 前 方程 。 可 得 


Po 十 A) 一 之 Pu)Pu(C) 


ko 
或 
Pilt + hk) — Pi(t)= > Palt) Py Ch) 一 Pi(t) 
此 一 站 
一 > Pia) Ph) — [1— P;(h)jJP.Q) 
hz} 
所 以 ， 
。 Pi(t th)— P(t) 
lim— 
h-*0 h 


=lim | DPalt) se 1 p, G4) | 
假定 我 们 能 交换 极限 与 求 和 ， 由 引 理 5. 4. 1 便 得 到 
Py = uPalt) —vP,t) 
令 人 遗憾 的 是 并 非 一 定 能 论证 极限 与 求 和 可 交换 ， 所 以 上 式 并 非 
总 是 成 立 的 。 然 而 ， 在 大 多 数 模 型 中 一 一 包括 全 部 生 灭 过 程 与 全 


部 有 限 状 态 的 模型 ， 它 们 确实 是 成 立 的 。 于 是 有 
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定理 5. 4.4 ( 柯 尔 莫 哥 洛 夫 向 前 方程 ) 。 在 适当 的 正则 条 件 下 ， 
P(t) = > quPalt) —v;P;(t) 


EA 


例 5.4 (a) 两 状态 链 。 考 虑 两 个 状态 的 连续 时 间 马 尔 可 夫 链 , 在 转移 
到 状态 1 之 前 链 在 状态 0 停留 的 时 间 是 参数 为 4 的 指数 变量 , 而 在 回 到 状态 
0 之 前 它 停留 在 状态 1 的 时 间 是 参数 为 4 的 指数 变量 ， 回 前 方程 为 
Poolt) = pPo GD) 一 4PooC) 
= (AT Po (lt) py 
其 中 最 后 的 等 式 来 自 Pot(t) 一 1 一 Pw(t)。 因 此 
e tH Poolt) (+p Po0lt) = yet 


或 
d CA pt CATO 
pF [e A Poo C#) | 一 ge A 


于 是 


et peo (1) ie +e 
由 于 Poo (0) 一 ]， 可 见 c 二 4 (14 十 20， Wa 

Po (#) = 
类 似 地 (或 由 对 称 性 )， 


PiC)= 


一 CA 二 po 


ey 生字 


et 


二 1 
例 5.4 (b) 生 灭 过 程 的 柯 尔 莫 哥 洛 夫 向 前 方程 是 
Pa 人 t) 一 AP 一 PC) 
Pi 区 一 AP 十 piPiriG 一 (十 Pt ， jz¥0 
例 5.4 (cec) 对 纯 生 过 程 ， 向 前 方程 归结 为 
(5. 4. 3) Pi(t) = —APa(t) 
Pit) = P,Q) — NP C0), ji 
积分 (5. 4. 3) 的 第 一 个 方程 并 用 PC(0)=1 得 
Pilt) =e 
上 式 当 然 是 正确 的 ,因为 P(t) 是 从 状态 i 转移 出 去 的 时 间 超 过 :上 的 概率 。 其 
它 的 量 Pu) ,7>i, 能 从 (5. 4.3) 如 下 递 推 而 得 :对 j>i, 人 队 (5.4.3) 有 
ev aiiPi,_1(t) =e* [P(t) + A P(t) 
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d + 
=LeV Po] 
积分 并 用 Pi;(0)=0 得 
Pi Qt) 一 ae eipP ls)ds, ji 


在 尤 尔 过 程 的 特殊 情形 ， 其 中 心 王 人， 可 用 上 式 验 证 5. 3 节 的 结果 ， 即 有 


7 _ emer), 这 这 1 


Pu 一 | 


注 记 ”者 定义 gj 二 一 上 ， 则 辐 后 方程 可 写 为 
P;(t) = S gapPyt) 
而 向 前 方程 为 可 
P;;(t) = > ovPac 


这 些 方程 用 矩阵 记号 写 有 特别 好 的 形式 。 若 我 们 定义 PC()， @ 及 
PQ) 为 矩阵 , 其 Gi, 站 位 置 上 的 元 素 分 别 是 PC) ,gj 及 P;; (2)，, 则 
向 后 方程 能 写 为 
PQ)=Q PQ) 
而 问 前 方程 为 
已 (人 一 已 CQ 
如 果 忆 (只 是 上 的 函数 而 Q 是 一 个 常数 , 则 上 式 的 解 是 


因此 认为 


(C5, 4. 4) P(#)= i 


是 PQ) 的 可 能 解 似乎 是 合理 的 ， 其 中 Q"== 了 (单位 矩阵 )。 事 实 上 
能 够 证 明 ， 当 vw 有 界 时 (5. 4. 4) 是 成 立 的 。 因此 ， 当 状态 空间 有 限 
时 ，(5. 4.4) 成 立 且 事实 上 这 可 能 是 一 种 近似 计算 已 Ci) 的 方便 的 
方法 (另外 的 逼近 方法 在 5. 8 节 中 出 现 )。 
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$.5 极限 概率 


因为 连续 时 间 马 尔 可 夫 链 是 一 个 半 马 尔 可 夫 过 程 ， 其 
F(t)=1—e 
从 第 四 章 4. 8 节 的 结果 得 , 如 果 转 移 概率 为 P; 的 离散 时 间 马 尔 可 
夫 链 是 不 可 约 正常 返 的 ， 则 极限 概率 了 ;一 lim Pi(t) 为 


(5. 5. 1) Po TY 
ZT/ 
i=0 

其 中 Tj 是 

(5. 5, 2) j= > niP; 
一 0 

Sn 


P=1 
或 等 价 地 ， 用 ;一 xPy， 是。 
(5. 5. 3) 5 成 一 >)PP， 
的 唯一 非 负 解 。 
注 记 


(1) 从 第 四 章 4. 8 节 中 给 出 的 关于 半 马 尔 可 夫 过 程 的 结果 得 
出 ，P; 也 等 于 长 时 间 之 后 过 程 处 于 状态 7 的 时 间 的 比率 。 
(2) 如 果 初 始 状态 按照 极限 概率 {P;} 选取 , 则 所 得 过 程 将 是 
» 1795。 


平稳 的 , 即 对 一 切 之 /PP5G) 一 已 
上 式 的 证 明 如 下 : 
Dj PsP; = 2 PilimPals) 


-limy PCDPuGs) 
-limPude 二 9 
=P, 
容易 论证 上 式 的 求 和 与 极限 可 交换 ,将 此 留 作 一 个 练习 。 
(3) 得 到 方程 (5. 5. 3) 的 另 一 途径 是 用 向 前 方程 
Pi 人 (= > guPialt) —vPi; Ct) 


kj 
车 我 们 假定 极限 概 府 PP; 二 limPi(t) 存 在 , 则 1> 吕 时 ,P(t) 
必 收 伊 于 0。( 为 什么 ?7 因此 ,假定 上 式 中 可 以 交换 极限 与 求 和 号 ， 
令 t>oo 即 得 
0= > ,Pigy—yP, 
A 
值得 注意 的 是 上 述 方法 是 下 列 直 观 论 证 的 较 正式 的 叙述 。 为 
了 得 到 P; (一 co 时 处 于 状态 j 的 概率 ) 的 方程 , 对 个 单位 时 间 
之 前 的 状态 取 条 件 : 
忆 一 > PC 已 
= > (qshtoh)) Pt (1—vhto(h) )P, 


或 


邻 h>0 即 得 结果 。 
(4) 方程 (5. 5. 3) 有 一 种 很 好 的 解释 如 下 : 在 任何 区 间 (0,z) 
中 ,转移 到 状态 7 的 次 数 与 从 状态 ; 转移 出 来 的 次 数 相 差 不 超过 1 
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(为 什么 ?) 因此 ,长 时 间 之 后 转移 到 状态 7 发 生 的 速率 必 等 于 从 状 
态 j 转移 出 去 发 生 的 速率 。 既 然 过 程 处 于 状态 7 时 它 以 速率 必 离 
开 , .又 因 已 ; 是 过 程 处 于 状态 7 的 时 间 的 比率 ， 于 是 得 
vjP ;二 过程 离开 状态 j 的 速率 
类 似 地 ， 当 过 程 处 于 状态 i 时 它 以 速率 g; 离 开 而 转 到 j, 又 因 
已 是 处 于 状态 i 的 时 间 的 比率 ， 可 见 从 i 到 j 的 转移 发 生 的 速率 
等 于 gif i 因此 ， 
之 ,Per5 一 过 程 进 人 状态 7 的 速率 
所 以 ,(5.5. 3) 正 是 说 过 程 进 入 与 离开 状态 7 的 速率 相等 。 因 
为 它 使 这 些 速率 平衡 〈 即 相等 )， 所 以 方程 〈5. 5. 3) 有 时 称 为 平 
衡 方程 。 
(5) 当 连 续 时 间 马 尔 可 夫 链 不 可 约 且 对 一 切 了 7 有 书 盖 0 时 ,我 
们 说 链 是 遍历 的 。 
现在 让 我 们 对 生 灭 过 程 确定 其 极限 概率 。 从 方程 (5. 5.3), 或 
等 价 地 ， 使 过 程 离开 一 个 状态 与 进入 该 状态 的 速率 相等 ， 得 到 
状态 过 程 离开 的 速率 过 程 进入 的 速率 


0 AoP, 一 站 天; 
n, n>0 (4 十 上 po)》 PP, = pnPtr A iP 
改写 这 些 方 程 为 
AoPo= paPi 
hPa pti Pst Ch iP 1 paP,), 2 之 ] 
或 等 价 地 
4 有 Po 一 AP 


APi= psPs (MPo— Pi) = 4 P, 
hsP2= paPst CAP1— psP2) = pa Ps 
AhPs = tiPatit MPa 1— PP,) = pr Prat 
用 PP。 解 得 
* 1]77。 


Poif 

Pp,—AP — Ai4o 0 
pe pop 

p hp, jp 
/3 As 

P,—~tp, ,= p 
Hn Hntin—! | 


利用 >)P, 一 1 得 


AA 
1= Pp, Pp, Sh 


z 一 ] fr"* p21 
或 

AuAi 

P= [1+ > 2] 

-因此 
GD 
A 1 
上 式 也 给 我 们 指明 了 极限 概率 存在 所 需 条 件 ， 印 
So 
2 一 1 KR2 "Hn 


例 5.5 (a) M/M/1 排队 系统 。 在 M/M/1 排队 系统 中 ， 加 二 4，p 二 
4， 于 是 若 MAp<1 从 (5. 5. 4) 得 


A/ He)” Al" A 
一- 划 ， 


要 极限 概率 存在 ，4 必须 小 于 x 是 直观 的 。 顾 客 们 按 速 率 4 到 来 且 以 速率 
受到 服务 ,因而 当 4 之 kx 时 他 们 到 来 的 速率 高 于 他 们 能 受到 服务 的 速率 ,排队 
长 度 将 趋 于 无 穷 . 一 A 的 情况 很 象 第 四 章 4. 3 节 的 对 称 随机 游 动 , 它 是 零 常 
返 的 ， 从 而 没有 极限 概率 。 
例 5.5 (b) 考虑 一 个 有 M 部 机 器 与 一 个 修理 工 的 车 间 ， 且 假设 一 部 
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机 器 在 损坏 前 运转 的 时 间 服 从 参数 为 4 的 指数 分 布 , 而 修理 工 修好 一 部 损坏 
了 的 机 器 的 时 间 服 从 参数 为 4 的 指数 分 布 . 每 当 有 7 部 机 器 坏 了 就 说 状态 为 
nx， 则 此 系统 为 一 个 生 灭 过 程 的 模型 ， 其 参数 
/a pk， n 之 1 
= | (M—n) A, nM 
0， n>M 
从 方程 (5. 5. 4) 可 得 n 部 机 器 不 在 使 用 的 极限 概率 P, 为 


P 一 1 


上 + 立 人 (全 ) si 
mi ) 
Po ， n=0, "*…,， M 
+ >| | i ey 
因此 ,不 在 使 用 的 机 器 的 平均 台数 为 
M4 四 > (M 一 | | 


人 + 51 


假设 我 们 想 知道 长 时 间 之 后 一 部 指定 的 机 器 在 工作 的 时 间 的 比 ,为 此 等 价 地 
我 们 计算 它 在 工作 的 极限 概率 : 


P11 该 机 器 在 工作 } = 之 /已 ( 该 机 器 在 工作 ”部 未 工作 )P， 


M 
M—n 
= 2P, 


5.6 时 间 可 逆 性 


考虑 一 个 过 历 的 连续 时 间 马 尔 可 夫 链 , 且 假 定 已 进行 了 无 限 

长 时 间 ; 例 如 ,假定 它 从 时 间 :一 一 2 开始 。 这 样 一 个 过 程 将 是 平 

稳 的 ,我 们 说 它 处 于 稳 态 之 中 。( 产 生平 稳 过 程 的 另 一 方法 是 假设 

在 时 刻 :一 0 的 初始 状态 按 极限 概率 选取 ) 在 时 刻 上 开始 让 我 们 把 

时 间 方 向 倒 过 来 跟踪 这 过 程 ,为 了 确定 这 逆向 过 程 的 概率 结构 , 首 
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抑 我 们 注意 到 在 某 时 刻 ( 璧 如 说 刀 处 于 状态 z 的 条 件 下 ,处 于 此 状 
态 的 时 间 已 超过 ; 的 概率 正 是 e vs。 这 是 因为 
P([t 一 s,t 内 过 程 全 处 于 状态 i|X() 二 让 
一 已 (LE 一 5 如 内 过 程 全 处 于 状态 号 /已 (X CD 一 中 
_P(X(—s)=i)e 
P{X(t)=7) 
oe 
其 中 P{XG 一 s)=i}=P{X()=7?} = 二 P,。 
换言之 , 逆 时 间 退 回去 ,过 程 处 于 状态 i 的 时 间 也 服从 指数 分 
布 , 参 数 为 vi。 此外, 如同 在 第 四 章 4.7 节 中 证 明 的 ,逆向 过 程 所 到 
达 的 状态 序列 构成 一 个 离散 时 间 马 尔 可 夫 链 ,其 转移 概率 Q, 为 


OQ — Ts 
1 XA. 
1 


因此 从 上 式 可 见 逆向 过 程 是 一 个 连续 时 间 马 尔 可 夫 链 ,离开 每 一 
个 状态 的 转移 速率 与 正 向 过 程 相同 ,一 步 转移 概率 为 Qu。 所 以 , 连 
续 时 间 马 尔 可 夫 链 在 时 间 道 向 过 程 与 原 过 程 具有 同样 的 概率 结构 
的 意义 下 是 时 间 可 道 的 ,如 果 嵌 入 链 是 时 间 可 逆 的 一 即 如 果 对 
一 切 ij 


TPi—xP; 
现在 利用 
P= 


可 多 上 面 的 条 件 等 价 于 对 一 切 : 夭 7 
PP 一 已 iiP， 

或 等 价 地 ,对 一 切 i 关 j 
《5. 6.1) Piqi;—= PQ: 
由 于 Pi 是 处 于 状态 i 的 时 间 的 比率 , 且 处 于 状态 i 的 过 程 以 速率 
4; 转移 到 j, 所 以 时 间 可 逆 条 件 就 是 过 程 直 接 从 状态 i 到 状态 j 的 
速率 等 于 它 直 接 从 到; 的 速率 。 应 当 注 意 到 这 正 是 遍历 的 离散 
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马尔 可 夫 链 时 间 可 逆 所 需 的 同一 条 件 ( 见 第 四 章 4. 7 节 )。 

应 用 上 述 时 间 可 逆 的 条 件 得 出 有 关 生 灭 过 程 的 下 列 命题 。 

命题 5. 6. 1 

饥 历 生 灭 过 程 在 稳 态 下 是 时 间 可 逆 的 。 

证 明 ”为 证 此 命题 ,我 们 必须 证 明生 灭 过 程 从 状态 i 到 状态 ;十 1 的 速 
率 等 于 它 从 i 十 1 到 i 的 速率 。 既 然 在 任意 长 为 1 的 时 间 内 从 i 转移 到 i 十 1 的 
次 数 与 从 i 十 1 转移 到 i 的 次 数 相差 不 过 1( 因 为 从 ; 到 i 十 1 的 两 次 转移 之 间 
过 程 必 须 返 回 到 i, 且 只 能 通过 i 十 1 回 到 i, 反 之 亦 然 )。 从 而 由 于 :一 co 时 这 种 
转移 的 次 数 趋 于 无 穷 ,得 从 i 到 i 十 1 的 转移 的 速率 等 于 从 i 十 1 到 i 的 速率 。 

命题 5. 6. 1 可 用 于 证 明 M/M/s 系统 的 输出 过 程 是 泊 松 过 
程 ， 把 它 叙 述 为 一 个 系 。 

系 5.6.2 

考虑 一 个 M/M/s 系统 ,其 中 顾客 依照 速率 为 的 泊 松 过 程 来 
到 ， 且 受到 * 个 服务 员 中 任 一 个 的 服务 一 一 每 一 个 服务 时 间 服 从 
参数 为 w 的 指数 分 布 。 若 \<sw, 则 顾客 离开 的 输出 过 程 在 稳 态 下 
是 速率 为 4 的 泊 松 过 程 。 

证 明 ”以 XG) 记 时 刻 : 系统 中 的 顾客 数 。 因 为 M/M/s 过 程 是 一 生 灭 
过 程 ,从 命题 5. 6. 1 得 {X (2) ,t 之 0} 是 时 间 可 逆 的 。 依 正 向 时 间 向 前 ,XG) 增 
加 1 的 时 刻 组 成 一 泊 松 过 程 ,因为 它们 正 是 顾客 来 到 的 时 刻 ,因此 由 时 间 可 
逆 性 , 按 逆向 时 间 和) 增加 1 的 时 刻 也 组 成 一 泊 松 过 程 ,但 是 它们 正好 是 原 
过 程 顾客 离开 的 时 刻 ( 见 图 5. 6. 1)。 因 此 离 去 的 时 刻 构成 一 速率 为 4 的 泊 松 
过 程 。 


X(t) 


Ox 
t 


图 5.6.1 z 为 按 逆 向 时 间 和 (Co 增长 的 时 刻 ; 
z 也 等 于 按 正 向 时 间 X( 减少 的 时 刻 。 


考虑 一 个 连续 时 间 马 尔 可 夫 链 , 其 状态 空间 是 > .。 我 们 说 马尔 
可 夫 链 被 截 于 集 4CS， 阁 对 一 切 iE 4，7 &4 改变 gi 一 0， 所 有 
其 它 的 gj 保留 不 变 。 于 是 从 状态 类 4 中 转移 出 来 是 不 允许 的 。 一 
个 有 用 的 结果 是 被 蕉 得 的 时 间 可 闭 链 仍然 是 时 间 可 逆 的 。 

命题 5. 6. 3 

具有 极限 概率 P; (jES) 的 时 间 可 逆 链 ， 若 截 于 集 4CS，, 被 
截 所 得 仍 不 可 约 ， 则 也 是 时 间 可 逆 的 旦 有 极限 概率 。 


(5. 6. 2) Pt=P,/ PP;, jEA 
jEA 
证 明 ”我 们 必须 证 明 ， 对 ziE4，jE4 
Pf go 一 PIG 


或 等 价 地 ， 对 iE€E A, jE4 
Pigj—= Pai 

但 因原 链 由 假设 是 时 间 可 逆 的 ， 所 以 上 式 成 立 。 

例 5.6 (a) 考虑 一 个 M/M/1 排队 系统 ,在 该 系统 中 当 来 客 发 现 系 统 
中 已 有 入 人 便 不 进去 而 消失 。 这 有 限 容量 的 M/M/1 系统 可 看 成 是 M/M/1 
被 截 所 得 ， 从 而 是 时 间 可 逆 的 ， 极 限 概率 为 

Pj= HL, OZjEN 
| 去 | 
其 中 我 们 利用 了 上 面 例 5.5 (Ca) 的 结果 。 

$5. 6.1 串联 排队 z 

M/M/s 排队 系统 的 时 间 可 逆 性 对 于 排队 论 来 说 还 有 其 它 的 
重要 含义 。 例 如 ， 考 虑 有 两 名 服务 员 的 系统 。 其 中 顾客 依照 速率 
为 4 的 泊 松 过 程 来 到 一 号 服务 员 处 ,在 一 号 服务 员 服 务 完毕 后 ,再 
到 二 号 服务 员 前 面 去 排队 。 我 们 假设 在 两 个 服务 员 前 的 等 待 场地 
是 无 限 的 . 在 任 一 时 刻 每 个 服务 员 只 为 一 名 顾客 服务 , i 号 服务 员 
为 一 名 顾客 服务 的 时 间 是 参数 为 上 的 指数 变量 , i 一 1, 2。 这 样 一 
个 系统 称 为 串联 系统 或 序 贯 系统 (图 5. 6. 2)。 因 从 一 号 服务 员 处 
输出 的 是 一 泊 松 过 程 ， 所 以 二 号 服务 员 面 临 的 也 是 一 个 M/M/1 
排队 。 然 而 ， 使 用 时 间 可 逆 性 我 们 可 得 到 更 多 的 结果 。 首 先 我 们 
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需要 如 下 的 引 理 。 
1 2 


5. 6.2 串联 系统 


离开 系统 


引 理 5. 6. 4 

在 一 个 遍历 的 稳 态 下 的 M/M/1 排队 系统 中 : 

(i) 目前 在 系统 中 的 顾客 人 数 与 过 去 的 诸 离 去 时 刻 独 立 ; 

(1) 一 个 顾客 在 系统 中 渡 过 的 等 待 时 间 (排队 等 等 加 上 服务 
的 时 间 ) 与 他 离开 之 前 的 离 去 过 程 独立 。 

证 明 (i) 因为 来 到 过 程 是 泊 松 过 程 ， 所 以 将 来 的 来 到 的 序列 与 目前 
系统 中 的 人 数 独 立 , 因此 由 时 间 可 逆 性 知 , 目前 在 系统 中 的 人 数 也 必定 与 过 
去 的 离开 的 序列 独立 (因为 时 间 倒 看 时 离开 钙 看 作 来 到 )。 

Gi) 考虑 一 名 在 时 刻 冯 来 到 而 在 时 刻 7。 离 去 的 顾客 。 因 为 系统 是 先 
来 先 服 务 且 具 有 泊 松 来 到 ， 所 以 顾客 的 等 竺 时间 了 :一 7 与 时 刻 Ti 之 后 的 
来 到 过 程 独立 。 现 在 将 时 间 倒 看 ， 我 们 看 到 ， 一 个 顾客 在 时 刻 了 : 来 到 ， 且 
同一 个 顾客 在 时 刻 了 | 离 去 (为 什么 是 同一 个 顾客 ?) 因此 , 由 时 间 可 逆 性 , 看 
逆向 过 程 可 知 ， 刀 :一 六 独立 于 ( 依 道 方 向 ) 时 刻 7; 之 后 的 (逆向 ) 来 到 过 程 。 
但 这 正 是 时 刻 了 之 前 的 离 去 过 程 。 

定理 5. 6.5 对 于 稳 态 下 的 遍历 串联 排队 : 

Gy) 目前 在 一 号 服务 员 与 二 号 服务 员 处 的 顾客 数 是 独立 的 , 且 

Ptn 人 在 一 号 服务 员 处 ，m 人 在 二 号 服务 员 处 } 
1 m 
(六) (一 训 儿 到 (二 高 | 

(1) 一 顾客 在 一 号 服务 员 处 的 等 待 时 间 与 他 在 二 号 服务 员 处 
的 等 竺 时间 独立 。 

证 明 (i) 由 引 理 5. 6.4《〈i) 知 顾客 们 在 一 号 服务 员 处 的 人 数 与 过 去 从 
一 号 服务 员 处 离 去 的 诸 时 刻 独 立 。 由 于 这 些 过 去 的 离开 时 刻 构 成 二 号 服务 员 
的 来 到 过 程 , 所 以 在 此 两 个 系统 中 的 顾客 数 是 独立 的 。 联合 概率 公式 可 从 独 
立 性 及 例 5. 3Ca) 中 给 出 的 M/M/1 排队 系统 的 极限 概率 公式 推 得 。 
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(让 ) 由 引 理 5. 6. 4(ii) 可 见 一 个 指定 的 顾客 在 一 号 服务 员 处 化 费 的 时 间 
与 他 离开 一 号 服务 员 之 前 的 离 去 过 程 独立 ,但 这 后 一 过 程 连同 在 二 号 服务 员 
处 的 服务 时 间 显 然 就 决定 了 顾客 在 二 号 服务 员 处 的 等 待 时 间 ， 因 此 结论 得 
证 。 

注 记 

(1) 为 使 定理 5. 6. 5(i) 中 的 公式 表示 联合 概率 ， 显 然 必须 有 
4/m<1，i 一 1，2。 这 是 串联 排队 为 遍历 的 充 要 条 件 。 

(2) 虽然 一 指定 的 顾客 在 两 名 服务 员 处 的 等 待 时 间 是 独立 
的 ， 但 有 点 令 人 惊奇 的 是 一 个 顾客 的 排队 时 间 是 不 独立 的 。 作 
为 一 个 反例 ， 假设 和 相对 于 Ai 一 As 很 小 ; 于 是 几乎 所 有 的 顾客 
在 两 个 服务 员 处 的 排队 时 间 为 零 。 然 而 ， 在 一 个 顾客 在 一 号 服 
务 员 处 的 排队 时 间 为 正 的 条 件 下 ， 在 二 号 服务 员 处 的 排队 时 


间 为 正 的 概率 至 少 是 二 。 (为 什么 ?) 因此， 排队 时 间 是 不 独立 


的 。 

5.6.2 一 个 随机 群体 模型 

假设 有 变异 的 个 体 依 照 参数 为 4 的 泊 松 过 程 进入 一 个 群体 。 
每 个 变种 一 进入 就 成 为 一 个 家 族 的 始祖 。 在 群体 中 一 切 个 体 独立 
地 活动 , 且 以 指数 率 v 生育 ， 以 指数 率 4 死亡 , 这 里 我 们 假定 v< 
Ho 

以 NN;(z) 记 时 刻 t 恰 有 j 个 成 员 (j 宇 0) 的 家 族 的 个 数 ， 且 记 

N(G) 一 (CVD N,(t),*…) 

则 {六 (2),t 宇 0} 是 一 连续 时 间 马 尔 可 夫 链 。 

对 任意 状态 1 一 (21，7122，…， n;, ) 其 中 ?ji 0， 和 定义 状态 


B= (ni, N22 “9 Nj ls nj—1， nj+1 十 1， … 7 之 1 
Dan= (71 ， N22» 9 10j-1 十 ]， nj;—1， Nijt1. “*)， 7 之 2 
也 定义 


Bon 一 (nn 十 1， Ns, »») 
Din = (m1—1], NH»» 站 
者 有 j 个 成 员 (j 之 1) 的 家族 中 有 一 生 或 一 死 ，Bn 与 Di 分别 表 
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示 从 状态 转移 到 的 下 一 状态 ， 而 Bon 则 是 出 现 一 个 变种 时 的 下 
一 个 状态 。 
如 果 我 们 以 gx,n' ) 记 马尔 可 夫 链 的 转移 率 , 则 非 零 的 转移 
率 仅仅 是 
gqg(n, Bon)=A 
q(n,Bin)= jny, ] 宇 1 
q(n, Da) = jnip, ] 宇 1 
为 了 分 析 此 马尔 可 夫 链 ， 值 得 注意 家 族 依照 一 个 泊 松 过 程 进 
人 和 群体 , 且 与 其 它 家 族 的 活动 互相 独立 地 以 随机 方式 改变 着 状态 。 
我 们 称 一 个 家 族 处 于 状态 j, 若 它 有 了 7 个 成 员 。 现在 我 们 假设 起 初 
群体 是 空 的 一 一 即 N (0) 一 0 一 一 而 且 我 们 称 一 个 来 到 的 变种 为 7 
型 的 , 若 其 家 族 在 时 刻 上 包含 7 个 个 体 . 于 是 从 第 二 章 命题 2. 3. 2 
对 于 多 个 类 型 的 推广 可 得 {Nj (2z), j 宇 1} 是 独立 的 泊 松 随机 变量 ， 
分 别 具 有 均值 
(5. 6. 3) ELNiCD] 一 PCGs)as 
其 中 Pj(;) 是 时 刻 s 起 源 的 一 个 家 族 在 时 刻 上 包含 7 个 个 体 的 概 
率 。 
以 Pt) 记 极 限 概 率 , 从 N(0) 二 0 时 Nj;(2) (J 之 1) 是 独立 的 泊 
松 随机 变量 这 一 事实 知 ， 航 民 入 这 将 有 形式 
(5. 6. 4) Pw= le 5 


2“ ，a，… 为 茶 些 数 。 现在 我 们 将 决定 < 且 同 时 证 明 此 过 程 是 时 间 
可 逆 的 。 对 形 为 (5. 6.4) 的 已) 有 


P(g(n, Bon) =41 ei 


Pl(Bon)g (Bonsn)= (n+ Dp Er ll -a 


7.1 

使 Pl(n)q(n » Bon) 与 PCLBon)g (Bon,n) 相 等 得 

(5. 6.5) 0 一 A] AH 
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类 似 的 对 j 兰 1,(5. 6.4) 给 出 : 
Pl(n)gl(n,，Bn) 将 等 于 PCBjn)aq(Bin,n)， 
若 jvQj; 二 (十 1) pajri 
由 (5. 6. 5) 便 得 


,好 
JIA K 
因此 ,对 于 (5. 6. 4) 给 出 的 已 2) ,其 中 必 一 4CVA2 7 岂 我 们 证 明 
了 
Pn)gtn,Ban)=P(B,n))g (Bn) ,n) 

在 上 式 中 改写 为 B;-1CD;(n)) 并 用 上 述 结 果 , 可 对 状态 z 与 Dx 
得 到 类 似 的 结果 ,因此 有 下 列 

定理 5. 6.6 连续 时 间 马 尔 可 夫 链 {NN (1) ,zt 之 0} 在 稳 态 下 是 
时 间 可 道 的 ,其 极限 概率 为 


Pn)= [| ee 
一 1 一 1 n,! 


其 中 
AT 
“= 训 [， 富 ] 
换言之 , 有 ; 个 个 体 的 家 族 的 极限 个 数 是 独立 的 泊 松 随机 变量 , 均 
值 分 别 为 
A 


|]， ;之 1 
a; 除了 是 有 i 个 成 员 的 家 族 的 极限 平均 数 外 还 有 一 种 有 趣 的 


解释。 从 (5. 6. 3) 可 见 
ETN CO 一 1 ec 一 oa 


一 人 | qls}ds 
D 


其 中 gq(s) 是 一 个 家 族 起 源 后 经 过 时 间 ; 有 i 个 个 体 的 概率 。 
因此 ， 
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(5. 6. 6) limE[N,G)]=A | cas 


但 是 考虑 任意 一 个 家 族 且 设 
ro 人 起 源 后 经 过 时 间 s 此 家 族 包含 个 成 员 
0， 


其 它 
则 
| oas =| EL gs 
=E[| 1Gs)4s] 
一 五 [此 家 族 有 : 个 成 员 的 时 间 j 
因此 ,从 (5. 6. 6) 
limELN(t)] 二 4E[ 一 家 族 有 i 个 成 员 的 时 间 j 
且 因 
E[N:(0) 一 w = 人 | 二 | 
可 见 


E[ 一 家 族 有 i 个 成 员 的 时 间 ] 一 /人 


今 考虑 稳 态 下 的 群体 模型 且 假 设 目 前 的 状态 是 2 。 我们 想 确 
定 一 个 给 定 的 有 i 个 成 员 的 家 族 是 群体 中 最 老 ( 意 即 起 源 最 早 ) 的 
家 族 的 概率 。 似 乎 我 们 可 能 用 过 程 的 时 间 可 逆 性 去 推断 出 ， 此 概 
率 与 该 家 族 是 目前 存活 的 家 族 中 最 后 起 源 的 概率 相同 。 然 而 ， 不 
雷 的 是 此 结论 不 能 立即 得 到 。 因 此 就 我 们 的 状态 空间 ， 不 可 能 由 
观察 全 过 程 去 决定 一 指定 的 家 族 灭绝 的 确切 时 间 。 因 此 我 们 需要 
一 个 提供 更 多 信息 的 状态 空间 一 一 一 个 使 我 们 有 可 能 去 跟踪 一 个 
指定 的 家 族 在 整个 时 间 中 的 演变 的 状态 空间 ，。 

出 于 技术 上 的 原因 , 从 不 允许 多 于 M 个 家 族 存在 的 截 尾 模型 
着 于 ，M 之 3n* ， 将 是 最 简易 的 。 即 无 论 何 时 在 群体 中 若 存在 M 
个 家 族 , 则 不 允许 任何 其 它 的 变种 进入 。 注意 到 , 由 命题 5. 6. 3 具 
有 状态 二 的 截 尾 过 程 仍 是 时 间 可 逆 的 且 具 有 平稳 分 布 。 
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Pla) =Clle SMW 


其 中 6 二 4AC(v/ 00)'/iv。 

为 了 随时 间 前 进 跟 住 指定 的 家 族 的 1 了 踪 ， 我 们 不 得 不 将 不 同 
的 家 族 标明 。 让 我 们 使 用 标记 1，2…，M 且 约 定 每 当 一 个 新 的 家 
族 起 源 ( 即 一 个 变种 出 现 ) 时 ， 它 的 标记 从 那 时 尚未 被 取 用 的 标记 
集合 中 等 可 能 地 选取 。 若 以 Si 记 标 记 为 7， i 一], 2, *…, M， 的 家 
族 的 个 体 数 (s; 二 0 意 指 目前 标记 为 i 的 家 族 不 存在 ), 则 我 们 可 认 
为 此 过 程 具 有 状态 s==(s1，…，sxm)，s; 宇 0。 对 于 给 定 的 s， 令 妈 
(5) 二 《ni《s),… m2(s),……), 其 中 Cs) 如 以 前 一 样 ,是 有 i 个 成 员 
的 家 族 的 个 数 。 即 

ni(s) 二 使 5;=i 的 7 的 个 数 。 

为 了 得 到 具有 状态 s 的 马尔 可 夫 链 的 平稳 分 布 ,注意 到 对 ?7 一 

n(s) 
P(s)=P(n)P(s |n) 


=PGslcITe “ee 

由 于 一 切 标 记 是 随机 地 选取 的 , 所 以 直观 上 对 给 定 的 向 量 ”, 与 它 
相 一 致 的 全 部 

MM! 

(MC— Dn TT 
个 可 能 的 向 量 s 是 等 可 能 发 生 的 ( 即 ， 如 果 M=3, n=ns=]， 
ni 二 0,1 之 3， 则 存在 两 个 家 族 ( 一 个 有 一 个 成 员 与 一 个 有 二 个 成 
员 )， 且 直观 上 看 来 ， 六 个 可 能 的 状态 (0，1，2 的 全 部 排列 ) 是 
等 可 能 的 )。 因 此 直观 上 看 来 

(AM 一 Sl)! Ta 加 
(5. 6. 7) Pl(s)= 一 一 CT 
其 中 ni—ni(s) 而 @ 二 4 Cv/ /i Vo 现在 我 们 将 验证 上 面 的 公式 日 
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同时 证 明 具 有 状态 s 的 链 是 时 间 可 道 的 。 

命题 5. 6. 7 

具有 状态 :一 (s，…sw) 的 链 是 时 间 可 逆 的 且 具 有 (5. 6. 7) 所 
给 出 的 平稳 分 布 。 

证 明 对 于 一 个 向 量 s= (sm… ,si… ,sm) , 令 

Bi(s)= (819°" ,5 1 ,smy) 

即 是 者 标记 为 i 的 家 族 的 一 位 成 员 生 一 后 代 时 则 Bs) 是 继 s 之 后 的 状态 , 现 
在 对 二 0 


gq(s,B;(s))= sy, si>0 
q(B(s),s)= (s+ 1) pg, si>0 
若 
An(s)—= (ns ns ns +t1»""") 
则 也 有 


n(B;(s)) = (Nn, 25 一 ] ys +1 十 1 ,*…) 
因此 对 于 由 (5. 6.7) 所 给 出 的 P(s) 及 s 守 0， 


等 价 于 
ns 05 (ns +I 十 1) os 十 1 
nl ns —D! nant) (si 1) 4 
或 


QSiv 一 Qs .+1 (5s; 十 1 ) pe 


器 


或 ， 因 为 a 一 4G/ pj)i/iv， 


( 革 "( 
A £ 


此 式 显然 成 立 。 
因为 状态 是 z 时 有 M 一 之 ,ms) 个 标记 可 用 于 一 新 诞生 的 变种 , 所 以 可 
四 = 
A 
at) 一 So 9 若 5 二 0 
MC— D> nils) 
q (Bi(s),s)= yp, 若 5 一 0 
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容易 证 明 方 程 (5. 6. 8) 在 这 种 情形 下 也 成 立 , 于 是 证 毕 。 

系 5. 6. 8 

若 在 稳 态 下 成 员 为 : 个 的 家 族 有 i 个 ,i 二 0, 则 一 个 指定 的 有 
i 个 成 员 的 家 族 是 此 群体 中 最 老 的 家 族 的 概率 是 i/ 2 ji。 


证 明 考虑 具有 状态 s 的 截 尾 过 程 且 假 设 状态 s 满足 nCs) 一 ni;。 一 个 
给 定 的 有 : 个 成 员 的 家 族 是 最 老 的 ,如 果 时 间 倒 过 去 看 它 存在 得 最 久 。 但 由 
时 间 可 逆 性 ,时 间 倒 过 去 的 过 程 与 时 间 向 前 看 的 过 程 有 同样 的 概率 分 布 , 因 
而 指定 的 家 族 是 最 老 的 概率 就 是 此 家 族 是 目前 群体 中 的 所 有 家 族 之 中 将 存 
活 最 久 的 概率 。 但 对 于 各 个 个 体 来 说 ,其 子孙 是 存活 时 间 最 久 的 概率 是 同样 
的 ,而 在 群体 中 有 之, jn; 个 个 体 ,其 中 i 个 属于 此 家 族 , 故 这 种 情形 下 结论 成 
立 , 令 M~co 则 得 一 般 情形 下 的 证 明 。 

注 记 ”我 们 选择 截 尾 过 程 处 理 , 是 因为 便于 猜测 具有 状态 s 
的 标记 过 程 的 极限 概率 。 


5.7 这 向 链 对 排队 论 的 应 用 


逆 回 链 是 一 个 十 分 有 用 的 概念 ,即使 过 程 不 是 时 间 可 逆 的 。 为 
了 明 上 逐 这 一 点 ,我 们 从 下 列 与 第 四 章 定理 4. 7. 2 相 类 似 的 连续 时 
间 情 形 的 结果 开始 。 
定理 5.7.1 以 qj 记 一 不 可 约 连续 时 间 马 尔 可 夫 链 的 转移 
率 。 如 果 我 们 能 找到 一 组 数 gj ,i,j 之 0,i 关 j, 及 一 组 和 为 1 的 非 负 
数 已,,z 之 0, 使 得 
Piqj= PAj, 天 
且 
人 790 一 人 9; ， i 之 0 
则 是 逆向 链 的 转移 率 而 已 是 (两 个 链 的 ) 极 限 概率 。 
定理 5. 7. 1 的 证 明 留 为 练习 。 


如 有 我 们 能 够 猜 到 逆向 链 与 极限 概率 , 则 可 用 定理 5.7. 1 证 
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实 我 们 的 猜测 。 为 说 明 这 种 方法 ,考虑 下 列 排队 网 络 的 模型 , 它 实 
质 上 推广 了 前 节 的 串联 排队 模型 。 

5.7.1 排队 网 络 

考虑 一 个 有 & 个 服务 员 的 系统 ,顾客 从 系统 外 面 来 到 各 个 服 
务 员 处 ,z 号 服务 员 处 的 来 到 过 程 (i 二 1,…,) 是 独立 的 速率 为 7 
的 泊 松 过 程 ;顾客 在 i 号 处 排队 直至 轮 到 为 他 们 服务 。 每 当 一 个 顾 
客 被 ; 号 服务 员 服 务 完 毕 , 他 以 概率 PP 到 7 号 服务 员 处 参加 排队 ， 


这 里 2) Pj<1, 而 1 一 >) Ps 表 示 一 顾客 经 i 号 服务 员 服务 完毕 


后 离开 系统 的 概率 。 
香 以 力 记 顾 客 来 到 7 号 服务 员 处 的 总 来 到 速率 , 则 2 可 作为 
(5. 7. 1) 二 xj 十 AP， 1 一 1 ，…) 开 


的 解 而 得 到 。 这 是 因为 xj; 是 顾客 从 系统 之 外 来 到 i 号 处 的 速率 ,而 
4 是 顾客 离开 i 号 服务 员 的 速率 ( 进 的 速率 必须 等 于 出 的 速率 )， 
4DPij 是 目 i 号 服务 员 处 到 7 号 处 的 速率 。 

此 模型 可 作为 具有 状态 tn1,ns,… ,ni) 的 连续 时 间 马 尔 可 夫 
链 , 其 中 i 表示 在 i 号 服务 员 处 的 顾客 数 ,根据 串联 排队 的 结论 我 
们 可 以 期 望 在 各 个 服务 员 处 的 顾客 数 是 独立 的 随机 变量 。 把 极限 
概率 记 为 Pni ,n° ,ng), 我 们 先 试 着 证 明 
(5. 7.2) Plnisnzs ,ni2) = Pn) Pna) Pini) 

这 样 ,这 里 的 P; (x) 就 是 在 i 号 服务 员 处 有 x; 个 顾客 的 极限 概率 。 
为 了 证 明 这 些 概率 确实 有 上 面 的 形式 并 得 到 P; (zi , i 一 1,…,， 
我 们 要 先 离开 本 题 而 对 逆向 过 程 作 推 测 。 

在 逆向 过 程 中 , 当 一 顾客 离开 i 号 服务 员 时 , 以 某 概率 去 7 号 
处 ,此 概率 可 望 不 依赖 于 过 去 。 若 此 概率 ( 记 作 P;)) 确 实 不 依赖 于 
过 去 ， 那 么 其 值 是 多 少 呢 ?要 回答 这 个 问题 ， 先 注意 来 到 一 个 服 
务 员 处 的 速率 必须 等 于 离开 他 的 速率 ， 从 而 在 正 向 及 北向 过 程 中 
在 7 号 服务 员 处 的 来 到 速率 都 是 必 。 因 为 在 正 向 过 程 中 , 顾客 从 7 
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到 i 转移 率 必 等 于 他 们 在 逆向 过 程 中 从 ; 到 ,7 的 转移 率 , 这 意味 春 


VPi= NP 
或 

— AP, 
(5. 7. 3) P;;= i 


于 是 我 们 可 望 在 逆向 过 程 中 一 名 顾客 离开 : 号 服务 员 时 以 概率 
P,;;=AP; /A 到 7 号 服务 员 处 。 
在 逆向 过 程 中 从 系统 外 来 到 了 服务 员 处 对 应 于 正 问 过 程 中 


从 i 号 处 离开 系统 ， 因而 以 速率 (1 一 > PP) 发 生 ， 最 好 不 过 的 
可 能 性 是 它 为 一 泊 松 过 程 ; 于 是 我 们 作 下 列 猜测 . 

猜测 逆向 随机 过 程 与 原 过 程 是 同类 型 的 网 络 过 程 。 从 系统 
之 外 到 i 号 服务 员 处 的 来 到 是 速率 为 (1 一 24Pv) 的 泊 松 过 程 ， 


且 从 i 离 去 到 ;的 概率 Pi 由 (5.7.3) 给 出 。 i 号 的 服务 率 是 指数 率 
上 5#m。 上 此外， 极限 概率 满足 
Pnisnay 5971) = PiCm)P,Cn2) PC 
为 了 证 明 此 推测 并 得 到 Pi(n;)， 先 考虑 一 名 外 来 顾客 引起 的 
转移 ， 即 考虑 状态 n 王 (21 ，…*，ni，…*，n4) 与 n' 二 (ni "Ni 十 
1，…，n4)。 既 然 


且 知 猜测 为 真 ， 应 有 
qx,n 一 Ai] 一 之 /五 5) 


Ci- 之 Pi) 
| 
(由 (5.7. 1)) 
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P(n) = LP P@ = Pm + DLP, 


因此 从 定理 5.7.1 我 们 需要 
TPs) = RP + DIP 


或 
Pi + 1) = Pilm) 
即 
Pn 1)= 全 PP) 一 [全 | Pa 1).… = [全 (0o) 


利用 >)PiCn) 二 1 得 


《5.7. 4) Pim)=| 全 | [1 一 全 | 
Ai 


于 是 为 使 猜测 成 立 ， 和 /VF 必须 小 于 1 且 Pi; 必须 如 上 式 所 示 。 
为 了 继续 证 明 此 猜测 ， 考 虑 从 7 号 服务 员 处 离 去 到 7 号 服务 

员 处 引起 的 转移 。 即 令 n 二 C1， Rj 及 nn 一 
《nN 十 1，… 7 一 1，…，n4)， 其 中 nj 宝 0。 既 然 

da = pd 
由 猜测 可 得 

qi .a = AP 
我 们 需要 证 明 

PopPi = Pa paP,, 

利用 (5.7. 4) 也 就 是 要 证 


而 这 正 是 Pi; 的 定义 。 
由 于 定理 (5. 7. 1) 所 需 的 其 余 事实 的 验证 可 用 同样 的 方法 进 
， 所 以 我 们 证 明了 下 列 
定理 5.7.2 假设 对 一 切 及 二 yj， 在 稳 态 下 ， 在 i 号 服务 
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员 处 的 顾客 数量 是 独立 的 且 极 限 概率 为 
已 (ml ,ns) = lz) | 1 一 全 | 


从 道 向 链 我 们 也 有 下 列 的 
系 5.7.3 


从 1 号 服务 员 处 离开 系统 的 顾客 过 程 是 独立 的 泊 松 过 程 ， 速 
率 分 别 为 (1 一 之 /Po)， 1 一 1 ，…，A。 


证 明 我们 已 证 明 在 道 向 过 程 中 顾客 依照 速率 为 (1 一 >r, ) 的 独 
立 泊 松 过 程 从 系统 之 外 来 到 i 号 服务 员 处 。 由 于 在 逆向 过 程 中 从 外 面 来 到 1 
号 服务 员 处 对 应 于 正 癌 过 程 中 从 i 号 服务 员 离 开 系 统 ， 从 而 结论 得 证 。 

注 记 

(1) 体现 在 定理 5.7. 2 中 的 这 个 结果 是 颇 为 惊人 的 。 因 为 它 
说 在 i 号 服务 员 处 的 顾客 数 的 分 布 与 具有 参数 六 与 4 的 一 个 MM/ 
AM/1 系统 的 分 布 相 同 。 人 惊人 的 地 方 在 于 在 网 络 模型 中 在 节点 z 处 
的 来 到 过 程 不 必 是 泊 松 过 程 。 因 为 如 果 存 在 一 顾客 多 次 光顾 一 位 
服务 员 的 可 能 性 ( 称 为 反馈 的 情形 ), 则 来 到 过 程 不 是 泊 松 过 程 。 一 
个 易于 说 明 此 事 的 例子 是 一 个 单 服务 员 系 统 其 服务 效率 《〈 即 指数 
服务 时 间 的 参数 ) 相对 于 外 来 的 甚 小 的 来 到 速率 显得 非常 大 ， 又 
假设 刚 服务 完毕 的 顾客 以 概率 如 一 0. 9 反馈 到 系统 中 。 因 此 在 一 
来 到 时 刻 有 很 大 的 概率 在 短 时 间 后 又 有 一 个 来 到 ( 即 反 馈 来 到 ); 
在 任意 时 刻 只 有 很 少 的 机 会 不 久 就 发 生 一 个 来 到 (因为 很 小 )。 
因此 这 个 来 到 过 程 不 具有 独立 增 量 从 而 不 可 能 是 泊 松 过 程 。 

(2) 此 模型 可 推广 为 各 个 服务 站 是 多 个 服务 员 的 系统 ( 即 ; 
号 服务 员工 作 情 况 如 同 M/M/&; 系统 而 不 是 M/M/1 系统 )。 在 各 
个 服务 站 的 顾客 的 极限 数 仍 将 是 独立 的 ， 且 在 一 个 服务 员 处 的 顾 
客 数 的 极限 分 布 如 同 来 到 过 程 是 泊 松 过 程 时 一 样 。 

5.7.2 爱 尔 朗 消失 公式 

考虑 一 消失 排队 模型 ， 其 中 顾客 们 按照 速率 为 4 的 泊 松 过 程 
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来 到 一 个 有 位 服务 员 的 系统 .所 请 是 一 个 消失 模型 , 意 指 任何 来 
客 发 现 所 有 服务 员 都 忙 着 便 不 进入 系统 ， 而 自 系统 中 消失 了 。 服 
务 员 的 服务 时 间 假 定 具 有 分 布 CG。 我 们 将 假设 G 是 一 个 具有 密度 
8g 和 失效 率 函 数 4(1) 的 连续 分 布 。 即 不 严格 地 说 A(1) ==g (1)/GG) 
是 已 经 历 上 单位 时 间 之 久 的 服务 行将 结束 的 瞬时 概率 强度 。 

在 分 析 上 面 的 系统 时 令 任意 时 刻 的 状态 为 该 时 刻 在 服务 中 的 
顾客 的 顺序 年 龄 ， 即 状态 是 z= (x1 Xa", Xn), A 
如 果 有 个 顾客 在 接受 服务 , 最 近来 到 的 一 个 是 x 个 单位 时 间 前 
来 到 的 , 次 最 近 的 是 zz 个 单位 时 间 前 来 到 的 , 等 等 。 相 继 的 状态 
形成 的 过 程 是 一 个 马尔 可 夫 过 程 ， 在 给 定 现 在 及 过 去 的 状态 时 任 
何 将 来 状态 的 条 件 分 布 只 依赖 于 现在 的 状态 ， 尽 管 这 过 程 不 是 一 
个 连续 时 间 的 马尔 可 夫 链 ， 但 我 们 对 链 所 发 展 的 理论 能 扩展 使 用 
于 这 个 过 程 ， 我 们 将 在 此 基础 上 分 析 这 个 模型 。 

我 们 将 试用 逆向 过 程 去 得 到 极限 概率 密度 Plzis ZT2s "**, 
To ，1<w<e，DsZ 太 … 生 Zoo， 以 及 系统 是 空 的 极限 概率 已 (g) 。 
由 于 一 位 在 服务 中 的 顾客 的 年 龄 从 0( 他 刚 来 到 ) 线性 地 增加 到 他 
的 服务 时 间 ( 他 即 离 去 )， 所 以 如 果 我 们 倒 过 来 看 ， 将 看 到 的 是 他 
的 剩余 服务 时 间 ,因为 在 本 系统 中 永远 不 会 多 于 & 个 顾客 ,所 以 我 
们 作 如 下 的 猜想 。 

猜测 逆 同 过 程 也 是 一 个 站 个 服务 员 的 消失 系统 ， 服 务 时 间 
分 布 为 C, 来 到 依照 速率 为 的 泊 松 过 程 发 生 。 在 任何 时 刻 的 状态 
表示 当时 在 服务 中 的 顾客 们 的 顺序 剩余 服务 时 间 。 

现在 我 们 试 着 去 证 明 上 面 的 猜测 且 同 时 得 到 极限 分 布 。 对 于 
任何 状态 z= (ZX1, Ti'** ,XT,) 令 ez) 一 (zl， 19 
z*)。 现 在 在 原 过 程 中 当 状 态 是 z 时 ， 它 瞬时 间 转 到 e(z) 的 概率 
密度 等 于 A(x;)， 因 为 已 服务 了 x; 时 间 的 人 必须 瞬时 间 结束 他 的 
服务 。 类 位 地 ， 在 逆向 过 程 中 如 果 状 态 是 e;(x)， 它 瞬间 到 xz， 如 
采 一 个 有 > 二 服务 时 间 的 顾客 瞬间 来 到 。 由 此 可 见 

在 正 向 过 程 中 :xz>e:(z) 以 概率 强度 A(z;); 
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在 逆向 过 程 中 :ei(Zz7)-> 工 以 人 联合) 概率 强度 hg (zxi)。 
因此 如 果 pCz) 表 示 极 限 密度 ， 则 按照 定理 5. 7. 1 我 们 将 需要 
PXIAxi) = ple(z))Ag (Xi) 
或 ， 因 为 A(z;) 二 g (Xi)/G (Xi)， 
p(T) = plez) NAGCx) 
令 i 二 1 并 番 代 上 式 得 
(5.7.5) p(x) 一 AMCCZD) 户 (el( 工 ) 
= AG(X)AG (Tr) p lee (x))) 


— I IG)P 
在 全 体 向 量 z 上 积分 得 
C5.7. 6) 
P{n 人 在 系统 中 } 一 已 (gj 小 二 Teyana 


rT 


=P(#) 全 小 | Tee )dzidzdz, 


PE aBLsy) 


其 中 ELS] 一 |5Cz)az 是 平均 服务 时 间 , 且 只 要 利用 


7 一 1]1,2,…R 


已 ( 十 之 /已 {z 人 在 系统 中 } = 1 


我 们 得 到 
CELS ])” 

(5.7.7) Pin 二 -mL ， nO 二 Us,l1,"", 

5.7.7 {n 人 在 系统 中 } BT Sy 0,1 k 

i 


从 (5.7.5) 我 们 有 
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rT Gc) 

(5.7. 8) p(X) = 一 一 -一 一 一 一 
一 CAELS])’ 
之 /一 一 


1 
i=0 i. 


并 看 到 在 系统 中 及 个 人 的 条 件 下 顺序 年 龄 的 条 件 分 布 密 度 为 


p{z|n 人 在 系统 中 ) 一 FT 区 大 下 
一 "!|] 站 
由 于 G(x)/ELSj]」 正 是 G 的 平衡 分 布 G. 的 密度 ， 我 们 看 到 ， 如 果 
此 猜测 是 对 的 ， 则 系统 中 人 数 的 极限 分 布 仅 通 过 其 均值 依赖 于 G 
县 由 (5.7. 6) 给 出 , 具 在 系统 中 有 "人 的 条 件 下 它们 的 (无 序 ) 年 龄 
独立 并 同 分 布 于 G 的 平衡 分 布 G.。 
为 了 完成 此 猜测 的 证 明 , 必 须 考虑 正 癌 过 程 在 n= 时 从 工 到 
(0，Z) 二 (0，ZXi1，ZXs，……，ZXs) 的 转移 。 现 在 
在 正 向 过 程 中 : xz 一 (0，x) 以 瞬时 强度 4; 
在 逆向 过 程 中 : (0，Z) 一 2 以 概率 1。 
因此 联系 定理 5. 7. 1 我 们 必须 验证 
p(x)X = pl0,z) 
它 得 自 (5. 7. 8)， 因 为 GC0)==1。 
“” 所以， 假定 (5. 7. 1) 的 类 似 结论 成 立 ， 我 们 已 经 证 明了 下 列 


定理 5. 7.4 ”在 系统 中 的 顾客 人 数 的 极限 分 布 为 
(5. 7. 9) 


CAELS ))" 


n! 一 本 各 生 
Pin 人 在 系统 中 } GELSJ) 如 一 0 1， ; 


且 在 系统 中 有 xn 人 的 条 件 下 这 人 的 年 龄 (或 剩余 时 间 ) 独 立 并 同 
分 布 于 G 的 平衡 分 布 。 
所 考虑 的 模型 常 称 之 为 爱 尔 朗 消失 系统 ,而 等 式 (5. 7.9) 称 为 
* 197 。 


受 尔 关 消 失 公式 。 

利用 逆向 过 程 也 可 得 如 下 的 系 。 

系 5.7.5 

在 爱 尔 度 消失 模型 中 离 去 过 程 ( 既 包 括 服 务 完毕 的 也 包括 消 
失 的 顾客 ) 是 速率 为 4 的 沪 松 过 程 。 

证 明 因为 在 逆向 过 程 中 所 有 顾客 (包括 消失 的 ) 的 来 到 构成 一 泊 松 
过 程 ， 故 得 上 述 结论 。 

5.7.3 M/G/1 共用 加 工 系 统 

”假设 顾客 按照 速率 为 和 的 泊 松 过 程 来 到 ， 每 个 顾客 需要 服务 
员 做 加 工 工 作 , 工作 量 是 随机 的 , 其 分 布 为 C。 服务 员 以 每 单位 时 
间 做 一 单位 工作 量 的 速率 加 工 ， 且 在 系统 中 的 全 体 顾客 中 间 等 分 
他 的 时 间 ， 也 即 每 当 系 统 中 有 = 个 顾客 时 每 人 都 以 每 单位 时 间 做 
1/2 单位 工作 量 的 速率 得 到 服务 。 

以 AGO 一 SG) 记 服 务 分 布 的 失效 率 函 数 , 且 假设 ELS] 
一 1, 其 中 ELSj 是 G 的 均值 。 

为 了 分 析 此 模型 ， 令 任意 时 刻 的 状态 为 仍 在 系统 中 的 顾客 已 
完成 的 工作 量 的 顺序 向 量 ， 也 即 状态 是 zz 一 (zi，ze，…，z)， 
JS Ta 入 … 和 < 三 Tv， 如 果 系 统 中 有 7 个 顾客 而 X11, “9 Xn 是 这 A 个 
顾客 已 完成 的 工作 量 。 以 p (x) 与 P(8) 记 极 限 概率 密度 与 系统 为 
空 的 极限 概率 。 关 于 逆向 过 程 我 们 作 如 下 的 猜测 。 

猜测 逆向 过 程 是 同一 类 型 的 系统 ， 顾 客 依照 速率 为 4 的 泊 
松 过 程 来 到 , 要 求 加 工 的 工作 量 分 布 为 C, 其 状态 表示 系统 中 的 顾 
客 的 顺序 剩余 工作 量 。 

为 了 验证 以 上 猜测 且 同 时 得 到 极限 分 布 , 令 ea (x) 一 (zi … 
Ti Ait 9 "Xn) 在 z 一 (zi XT) ，T<T…<z。 注 音 
到 

在 正 癌 过 程 中 :zx->e(x) 以 概率 强度 A(x;)/n; 

在 逆向 过 程 中 :e;(x) 一 x ”以 (联合 ) 概 率 强度 Xg(Czi) 。 

这 些 可 以 用 与 前 一 节 同 样 的 方法 得 到 ,不 同 的 是 车 在 系统 中 有 
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个 人 则 一 个 已 完成 工作 量 二 的 顾客 将 立即 加 工 完毕 的 概率 强度 


为 Ah(zi)VP 。 
因此 ， 若 p (x) 是 极限 密度 ， 则 依 和 定理 5. 7. 1 我 们 需要 
户 ( 工 ) 人 = plei(z))Ag (Xi) 
或 等 价 地 


(5. 7. 10) pL)=nG(ri) per A 
=nG(zr) (n—1)GCr)ple (er RAR, jx 


—n!1 rp# ECz) 
如 在 (5.7. 6) 中 那样 ， 在 全 体 向 量 x 上 积分 得 
Pn 人 在 系统 中 } 二 QELS 1)"P(9) 
利用 


PC$) 上 > Ptn 人 在 系统 中 } = 1 


给 出 
P{n 人 在 系统 中 } = QELS])"(1 一 MELSJ)， nn 宇 0 
从 (5. 7. 10) 也 得 ， 在 系统 中 有 2” 人 的 条 件 下 ， 顺 序 的 已 完成 的 工 
作 量 的 条 件 分 布 密度 为 
p(xzin) = 二 p(xz)/P{n 人 在 系统 中 } 


"G(x. 
一 区 
即 在 系统 中 有 ”人 的 条 件 下 无 顺序 的 已 完成 的 工作 量 是 独立 的 且 
服从 于 G 的 平衡 分 布 C.。 
以 上 都 是 以 假设 此 猜测 成 立 为 基础 的 。 为 了 完成 猜测 成 立 的 
证 明 我 们 必须 验证 


l 


因为 处 于 状态 (e, xz) 的 逆向 过 程 在 时 间 (xn 十 1)。 后 到 状态 zx， 所 
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以 有 上 列 有 关 等 式 。 由 于 上 式 很 容易 得 到 验证 ， 于 是 我 们 证 明了 
下 列 

定理 5.7.6 对 共用 加 工 模型 ， 系 统 中 的 顾客 人 数 具 有 分 布 

Pt{n 人 在 系统 中 } 二 AELS])"(1 一 AE[S])， 之 0 

在 系统 中 有 mn 人 的 条 件 下 ， 已 完成 的 (或 剩余 的 ) 工 作 量 是 独 
立 的 且 具 有 分 布 G.。 离 去 过 程 是 速率 为 4 的 泪 松 过 程 。 

者 我 们 以 L 记 系 统 中 的 平均 人 数 ,而 W 记 一 顾客 在 系统 中 渡 
过 的 平均 时 间 ， 则 : 

L= >nAELSI)"(1 — AELSJ) 


n=0 


_ AELS] 
1 AE[SI] 
从 公式 工 二 4W( 见 第 三 章 的 3. 6. 1 节 ) 我 们 能 得 到 W， 故 有 
L E[S] 


W = 7 TE 


注 记 非常 有 趣 的 是 一 顾客 在 系统 中 渡 过 的 平均 时 间 仅 仅 通 
过 G 的 均值 而 依赖 于 C。 例 如 ， 考 虑 两 个 这 样 的 系统 : 在 一 个 系 
统 中 工作 量 恒 为 ]， 而 另 一 个 系统 中 工作 量 都 服从 均值 为 1 的 指 
数 分 布 。 从 定理 5.7.6 知 ， 一 位 来 客 所 见 到 的 系统 中 人 数 的 分 布 
对 两 个 系统 是 同样 的 。 然 而 ， 在 前 一 系统 中 一 位 来 客 发 现 顾客 的 
剩余 工作 量 服从 (0,1) 上 均匀 分 布 ( 这 就 是 均值 为 1 的 决定 性 随机 
变量 分 布 的 平衡 分 布 ), 而 在 第 二 个 系统 中 剩余 工作 量 都 是 均值 为 
1 的 指数 分 布 。 因 此 一 位 来 客 在 两 个 系统 中 的 平均 时 间 相 同 是 十 
分 惊奇 的 。 当 然 一 个 顾客 在 系统 中 渡 过 时 间 的 分 布 ， 与 此 分 布 的 
均值 相反 ， 依 赖 于 整个 分 布 C， 而 不 是 只 依赖 于 它 的 均值 。 

此 模型 中 另 一 个 有 趣 的 事情 是 计算 已 知 来 客 的 工作 量 为 y 的 
条 件 下 他 在 系统 中 渡 过 的 条 件 平 均 时 间 。 为 计算 此 量 ， 固定 y 且 
说 一 顾客 是 “特殊 的 ”, 若 他 的 工作 量 在 > 与 y 十 e 之 间 。 由 工 =AW 
我 们 有 

系统 中 特殊 顾客 的 平均 数 == (特殊 顾客 的 平均 来 到 速度 ) 
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Xx (一 个 特殊 顾客 在 系统 中 渡 过 的 平均 时 间 )。 
为 了 决定 系统 中 特殊 顾客 的 平均 人 数 ， 让 我 们 首先 确定 在 系统 中 
的 任 一 顾客 的 总 工作 量 的 密度 。 假 设 这 样 一 位 顾客 已 经 受到 加 工 
的 工作 量 为 zx， 则 顾客 的 工作 量 的 条 件 密 度 是 
f(w| 已 受 加 工 z) = g(w)/G(z)， Tw 
但 从 定理 5.7.6 知 ， 系 统 中 任 一 顾客 已 接受 加 工 的 工作 量具 有 分 
布 G.。 因 此 在 系统 中 的 某 人 的 总 工作 量 的 密度 是 


fw) = | EG Cz) 


0 G(x) 
“g(rw) G(x) 
一 | ET Sd 《 因 dG.,(x) 一 ETS]4™) 
= wg(w)/ELS] 
因此 系统 中 特殊 顾客 的 平均 数 是 


EL 系统 中 工作 量 在 y 与 > 十 之 间 的 人 数 ] 
= Lf(y)e + o(e)) 
= Lyg(y)e/ELS | 二 o(e)) 
为 外 ， 工 作 量 在 y 与 y 十 e 之 间 的 顾客 的 平均 来 到 速率 是 
平均 来 到 速率 二 hg (y)e 十 ole) 
由 此 可 见 


五 [在 系统 中 的 时 间 | 工作 量 在 Cy,y 十 e) 中 ] 
gly)e Ly OfKe) 


Ag(y)e E[S | 十 E 
令 s 一 0 我 们 得 到 


(5.7.11) EL[ 在 系统 中 的 时 间 | 工作 量 是 y] 一 xEYs]L 


_ B42 
1 — AELS |] 
所 以 一 位 需要 加 工 y 单位 工作 量 的 顾客 在 系统 中 的 平均 时 间 
也 仅仅 通过 其 均值 而 依赖 分 布 G. 作 为 验证 上 式 的 一 种 方法 , 注意 
W ==E[ 在 系统 中 的 时 间 ] 
一 ]E[ 在 系统 中 的 时 间 | 工 作 量 是 yjJdG cy) 


* Z01 。 


五 1 
1 一 大 [LS] 


与 前 面 所 得 相同 。 


5.8 一 致 化 


考虑 一 个 连续 时 间 马 尔 可 夫 链 ， 它 在 一 个 状态 中 滤 过 的 平均 
时 间 对 所 有 状态 都 是 同样 的 ， 也 即 假设 对 一 切 状态 i, 4 二 x。 此 时 
由 于 对 每 个 状态 一 次 逗留 的 时 间 服 从 参数 为 v 的 指数 分 布 ， 所 以 
如 果 我 们 以 入 (2) 记 到 时 间 t 为 止 状 态 转 移 的 次 数 ， 则 4N (2), z 过 
0} 是 一 个 速率 为 的 泊 松 过 程 

为 了 计算 转移 概率 了 P;;(t:〉， 我 们 可 对 入 (2) 取 条 件 如 下 : 
P(t)=P{X(t) = IX(0)=7) 


(由 (5.7.11)) 


一 之 ,PP(XCD 一 7 XO0)=i, NG)=n}P{ING)=n|X(0)=7) 
(Vv)” 

nl 
到 时 间 为 止 已 有 次 转移 这 个 事实 给 了 我 们 一 些 关 于 在 所 到 达 
的 前 ”个 状态 的 逗留 时 间 的 信息 ， 但 由 于 在 各 状态 逗留 的 时 间 的 
分 布 对 全 体 状 态 都 相同 ， 所 以 并 没有 给 我 们 有 关 到 达 哪 些 状态 的 
信息 。 因 此 

P{X(G) = jj|IX(0)=i,NG) =n}= P; 

其 中 Pi 正 是 具有 转移 概率 Pi 的 离散 时 间 马 尔 可 夫 链 的 n 阶 转移 
概率 ; 所 以 当 vw 三 v 时 ， 有 


(5. 8. 1) P;, () = DP 


从 计算 观 点 上 看 上 面 的 方程 十 分 有 用 ， 因为 它 使 我 们 能 取 一 
个 部 份 和 并 计算 (用 转移 概率 和 矩阵 乘法 ) 有 关 的 ” 步 转移 概率 Ps 
去 逼近 已;G) 。 
虽然 方程 (5 8. 1) 的 应 用 范围 显得 十 分 有 限 ， 因 为 要 假设 
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= DPX j|IX(0)=i, N()=n}e™” 


(7 2 


4 圭 v, 但 利用 一 种 允许 一 个 状态 到 它 自身 的 虚 转 移 的 技巧 ,多 数 马 
尔 可 夫 链 能 被 放 进 这 种 形式 。 为 了 明 具 怎 样 作 法 ， 考 虑 任意 的 + 
有 界 的 马尔 可 夫 链 ， 设 ”是 满足 下 式 的 任何 数 

(5. 8. 2) vy, 对 一 切 i 

当 过 程 处 于 状态 i 时 实际 上 以 速率 4 离 去 ; 而 这 等 价 于 假设 转移 
以 速率 v 发 生 , 但 只 有 ww/» 部 分 是 真正 转移 出 i, 而 其 余 的 部 分 是 
虚 转 黎 ， 过 程 仍 在 状态 i:。 换 言 之 ， 任 何 满足 条 件 (5. 8. 2) 的 马尔 
可 夫 链 可 看 作 是 这 样 一 个 过 程 ， 它 在 状态 i 渡 过 一 个 参数 为 v 的 
指数 时 间 而 后 以 概率 Pz 转移 到 }， 其 中 


(5. 8. 3) Pp;=4 
Pp, ji 
因此 ， 从 (5. 8. 1) 转 移 概 率 可 算得 为 
PCD = Dprre-e 人 人 
其 中 P3" 是 对 应 于 (5.8. 3) 的 > 步 转移 概率 ， 这 种 引进 一 个 状态 到 
它 上 自身 的 转移 从 而 使 自 每 个 状态 转移 出 去 的 速率 同一 的 技巧 ， 被 


称 为 一 致 化 。 
例 5.8 (a) 让 我 们 考虑 例 5. 4(a) 的 两 状态 链 ， 它 有 
Pu= Pio= 1 
vo 一 4， 二 
令 v 一 4 十 k， 上 述 链 的 一 致 化 是 把 它 考虑 成 一 个 具有 
A 1 一 
Pw = A 1 Po 
六- 一] 
Pw A 1 Py 
中 一 4 十 HA， 一 1,2 
的 连续 时 间 马 尔 可 夫 链 。 


由 于 Po 二 Pio， 进入 状态 0 的 转移 概率 是 jx/(4 十 上 ,与 目前 的 状态 无 
关 。 由 于 对 于 状态 1 有 类 似 的 结果 ,得 步 转移 概率 为 
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Pi 二 一 全 -， n 之 1， i 二 0,] 


及 十 中 
因此 ， 
所 [CA )t 
Pookt) = 2 Poe orm LA + Oe 二 
一 er-eto 十 [1 一 ec-o+ro0] -到 
4 十 到 
天 4 ar 
Tr Tir 
类 似 地 ， 


PQ) 一 >P, p— Qt Lt tT 


ni1 
机 
一 Xt i 


为 一 有 趣 的 量 是 到 时 刻 i 为止 过 程 处 在 一 指定 状态 的 总 时 
间 . 也 即 , 和 不 人) 记 时 刻 上 的 状态 (0 或 1)。 令 SC2) ,i 二 1,0, 为 


(5.8. 4) SG) = | Xas 


Pb sd 


SG) = |a _ XG ds 


则 S(t) 表示 到 时 刻 上 为 止 在 状态 : 的 逗留 时 间 。 此 随机 过 程 
ti 全 01 称 为 状态 z 的 占有 时 间 过 程 。 

现在 我 们 假设 X (0) 王 0， 并 且 要 确定 SoG) 的 分 布 。 从 
(5. 8. 4) 算得 它 的 均值 : 

E[S,) |X(0) = 0]= | En ~ X(s) ds 


一 | Pocoas 
A — Qtr 
= x+ Fl Te ts | 
我 们 不 想 去 计算 5olz) 的 方差 (见习 题 29) ,宁愿 直接 考虑 其 分 布 。 
为 了 确定 给 定 X(0) = 0 时 SQ) 的 条 件 分 布 ,我 们 将 利用 
(之 0 的 一 致 化 表示 。 开 始 先 对 NG) 取 条 件 得 到 ,对 ;二 i 
PtSuGD <s) = Pleat PS SsING) = n) 


二 人 0 
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_ De tte CT A p(s, i) 过 siIN(G) 一 1 } 


n=] 


最 后 的 等 式 是 因为 N() = 0 缠 含 着 Sot) 王女 由 于 有 (0) 二 0)。 
在 NG) = 的 条 件 下 ,把 区 间 (0, 四 分 为 n 十 1 个 子 区 间 (0,X)， 
(X01) ;X02)) 9 《An 入 on) ’? (Xi 其 中 Xu) 芝 XX, A < 
Xo 是 {N (5s)} 到 tt 时 为 止 的 个 事件 的 发 生 时 刻 , 过 程 {X(2)}) 在 
任 一 指定 的 子 区 间 中 处 于 同一 状态 .在 第 一 个 子 区 间 中 它 处 于 状 
态 0, 而 在 往 后 各 个 子 区 间 中 相互 独立 地 以 概率 /CA 十 A) 处 于 状 
态 0. 因 此 ,给 定 六 (5 二 7 时, 过程 处 于 状态 0 的 子 区 间 的 个 数 等 
于 1 加 上 一 个 贝 努 里 24,4/ 十 四)) 随机 变量 . 若 此 和 等 于 &( 即 ， 
车 有 1 十 Bintn,j/C4 十 由) = 二 有 ) 则 SoC2) 将 等 于 个 上 述 子 区 间 
长 度 之 和 。 然 而 , 因 兴 o，…X%o 的 分 布 如 同 % 个 独立 的 (0,:》 上 均 
匀 分 布 的 随机 变量 的 顺序 统计 量 的 分 布 , 所 以 7 十 1 个子 区 间 长 
7 了 ,了 ,… ,Yaty 的 联合 分 布 ( 其 中 A CO XD = 1 n 
十 二 及 Xo 王 0,Aorb 二 站 是 可 交换 的 ,也 即 己 (7 委 三 1， 
,nn 十 1} 是 癌 量 Cy1,… ,yat1) 的 对 称 函 数 ( 见 习题 30) 。 所 以 ,Y， 
中 任何 个 之 和 的 分 布 都 相同 ,不 管 是 哪些 Y; 在 和 中 。 最 后 ， 因 
入 由 一 和 十 十 入 
可 见 当 & 委 2 时 ,这 和 与 ”个 独立 (0, 纪 ) 上 均匀 分 布 的 随机 变量 的 
第 个 最 大 值 有 同样 的 分 布 .( 当 《二 十 1 时 此 和 等 于 z) 因此 ,对 
st 
a 


好 


PlXu, < s} = > 


zk 
综 上 所 述 ， 对 了: 
P {S(t) SsIX (0) = 0) 


一 - Se-orm (A+ WD 
n= 1] 


k=1 


LU 


x >" 


,ik'! 
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也 有 
己 {(Su() = #|X (0) = 0} = ee” 


习 题 


1. 一 生物 群体 由 雄性 及 雌性 成 员 组 成 ， 在 一 个 小 的 群落 中 任 一 特定 的 雄性 
成 员 与 任 一 特定 的 肉 性 成 员 在 任 一 长 为 h 的 时 间 区 间 中 交配 的 概率 为 信 
十 ot 及 )。 每 次 交配 立即 产生 一 个 后 代 , 它 等 可 能 地 是 雄性 或 肉 性 。 令 和 Ni 
4) 与 Na 表示 在 上 时 群体 中 雄性 与 肉 性 的 个 数 。 导 出 连续 时 间 马 尔 可 去 
链 {N1GQ),N,()) 的 参数 。 

2, 假设 一 个 单 细 胞 生物 处 于 两 个 状态 一 一 4 或 8 之 一 ， 处 于 状态 4 的 一 个 
个 体 以 指数 率 a 变 到 状态 B， 处 于 状态 B 的 一 个 个 体 以 指数 率 8 分裂 成 
两 个 新 的 4 型 个 体 。 为 这 样 的 生物 群体 定义 一 个 合适 的 连续 时 间 马 尔 可 
夫 链 ， 并 且 决 定 这 个 模型 的 适当 的 参数 。 

. 证 明 连 续 时 间 马 尔 可 夫 链 是 规则 的 , 若 已 知 (a) 对 一 切 i 有 < M<co 或 
bb 转移 概率 为 Pi 的 离散 时 间 马 尔 可 夫 链 是 不 可 约 且 常 返 的 。 

4. 对 于 一 个 具有 出 生 参 数 如 (n 宇 0) 的 纯 生 过 程 , 计算 群体 总 数 从 0 到 NN 所 

需 时 间 的 均值 、 方 差 与 甜 母 函数 。 
5. 考虑 一 个 X 0) 一 : 的 尤 尔 过 程 。 给 定 关 (4) 二 i 十 ,关于 在 (0,t) 内 出 生 的 
个 个 体 的 出 生 时 间 的 条 件 分 布 能 说 些 什 么 ? 
6、 验证 例 5.3 (b) 中 给 出 的 公式 
4(0 一 四 十 [Xa 


7. 考虑 一 个 从 一 个 个 体 开始 的 尤 尔 过 程 ,并 假设 在 时 刻 s 出 生 的 个 体 以 概率 
P(s) 是 健壮 的 。 计 算 在 (0,) 内 出 生 的 健壮 的 个 体 个 数 之 分 布 。 

8. 证 明 引 理 5. 4.1。 

9. 证 明 引 理 5. 4. 2 。 

10. 令 PG)= Po (2) 
l(a) 求 


to 


lim 工 二 二 人) 
t+0 i 


Cb》 证 明 ， 
。306 。 


11. 


12. 


13., 


14. 


1s. 
16. 


PPC) EPG+S) SE PG) POIOPG) 


(Cc) 证 明 : 
IPO) POIZI—-PG-), < 
并 得 出 PP 是 连续 的 结论 。 
对 尤 尔 过 程 : 
《a) 验证 


P,(t) = [一 | e (1 一 e “i 


满足 向 前 与 向 后 方程 。 
Cb) 假设 XX (0)=1 且 在 时 刻 T 过 程 停止 并 由 一 个 移出 过 程 震 代 ， 其 中 
移出 按照 速率 为 y 的 泊 松 过 程 而 发 生 。 以 + 记 在 T 之 后 群体 灭绝 所 
需 时 间 。 求 + 的 密度 函数 并 证 明 
E[r] = eT/¢ 
假设 系统 的 “状态 ”可 建 模 为 两 状态 的 连续 时 间 马 尔 可 夫 链 ， 其 转移 率 
为 w=A, v= jo 当 系 统 的 状态 是 i 时 ， “事件 ” 按照 速率 为 a; 的 泊 松 过 
程 发 生 ，i 一 0，1。 以 NGQ) 记 (0,2) 中 事件 的 个 数 ， 
(a) 求 imN (2)/t。 
Cb》 如 果 初 始 状态 是 状态 0， 求 E[N (2)]。 
假定 一 生物 群体 中 的 各 个 个 体 以 指数 率 * 出 生 而 以 指数 率 py 死亡 。 另 
外 , 存在 由 迁 入 引起 的 指数 增长 率 9, 但 是 当 群 体 总 数 是 N 或 更 大 时 , 则 
不 允许 迁 人 。 
(a) 对 此 建立 一 个 生 灭 模型 。 
(b) 如 果 入 二 3，1 一 0 二 +1， 二 2， 确 定 迁 入 受到 限制 的 时 间 的 比例 ， 
一 家 由 一 名 理发 员 主持 的 小 理发 店 , 至 多 容纳 两 个 人 。 可 能 来 的 顾客 以 
每 小 时 3 人 的 速率 的 泊 松 过 程 来 到 , 相继 的 服务 时 间 是 独立 的 均值 为 二 
小 时 的 指数 随机 变量 ， 
(a) 店 中 顾客 的 平均 数 是 多 少 ? 
(b) 进 店 的 顾客 占 多 少 比 率 ? 
(c) 车 理发 员 能 加 快 一 倍 地 工作 ， 他 会 多 做 多 少 生意 ? 
对 M/M/s 系统 求 极限 概率 ， 并 且 确 定 极限 概率 存在 所 需 的 条 件 。 
若 {X(CD ,1 之 0) 与 YQ4),t 之 0} 是 独立 的 时 间 可 递 的 马尔 可 夫 链 ,证 明 过 
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17. 


18. 
19. 


20. 
21. 


22. 


程 {(XQ(),YQ)),t 宇 0} 也 是 如 此 。 
考虑 参数 分 别 为 入 ，p 的 两 个 M/M171 排队 系统 ， 其 中 之 j,i 二 1,，2。 
假设 它们 共同 使 用 一 个 容纳 N 个 人 的 候 客室 。( 即 每 当 候 客室 占 满 时 一 
切 来 客 都 消失 。.) 计算 在 第 一 个 系统 中 有 人“《 当 ">>0 时 1 人 在 接受 服 
务 而 ”一 1 人 在 候 客室 中 ) 而 mm 人 在 第 二 个 系统 的 极限 概率 。( 提 示 : 利 
用 习题 16 的 结果 .) 
关于 只 能 容纳 有 限 个 人 的 平稳 MM/M/1 系统 的 离 去 过 程 , 你 能 说 些 什 么 ? 
在 5. 6.2 节 的 随机 群体 模型 中 : 
4a》 证 明 : 当 了 (ww) 由 (5. 6. 4 给 出 ,其 中 & 二 OA/72)G/p0! 时 
Pala,D;n) 一 P(D;n)a(D, n,n) 
Cb) 以 DOG) 记 (0,t) 中 灭绝 的 家 族 数 。 假设 过 程 在 时 刻 :一 0 处 于 稳定 态 
0, {DC() ,zt 之 0) 是 什么 类 型 的 随机 过 程 ?车 最 初 群体 在 :=0 是 空 的 ， 
它 又 是 什么 过 程 ? 
完成 5. 7. 1 节 的 排队 网 络 模型 中 的 猜测 的 证 明 。 
A 个 顾客 游 动 于 7 个 服务 员 之 间 。 在 i 号 服务 员 处 的 服务 时 间 是 参数 为 
睛 的 指数 变量 。 当 一 顾客 离开 i 号 服务 员 时 他 以 概率 1/ (r 一 1) 去 7 号 
服务 员 处 (j 了 让 排队 (车 有 人 在 等 待 ， 否则 他 就 直接 进入 服务 )。 令 状 
态 为 《m1，…，n,)， 车 在 i 号 服务 员外 有 ni 个 顾客 ， i 二 1，…，r。 证 明 
相应 的 连续 时 间 马 尔 可 夫 链 是 时 间 可 逆 的 ， 并 求 极 限 概率 。 
考虑 一 时 间 可 逆 的 连续 时 间 马 尔 可 夫 链 , 它 有 参数 ,Pi 及 极限 概率 也;， 
J 之 0。 选 择 某 个 状态 〈 比 如 说 状态 0)， 考 虑 一 个 新 的 马尔 可 夫 链 ， 它 使 
状态 0 成 为 一 个 吸收 状态 ， 即 重新 令 mw 等 于 0。 现在， 假设 在 按照 一 速 
率 为 4 的 泊 松 过 程 选取 的 时 刻 都 有 马尔 可 夫 链 开始 ,它们 都 是 如 上 的 类 
型 (以 0 作为 吸收 状态 )， 以 概率 Po 选取 初始 状态 为 j。 
假定 一 切 存在 的 链 是 独立 的 。 以 NiG) 记 时 刻 t 处 于 状态 7 (二 0) 
的 链 的 个 数 。 
(a) 论证 如 果 没 有 初始 链 ， 则 NN;(z) (7 二 0) 是 独立 的 泊 松 随机 变量 。 
(b) 在 稳 态 中 论证 向 量 过 程 {CNi (Co ,Ns(4),…)}) 是 时 间 可 道 的 ， 具有 平 
稳 分 布 : 对 nn 二 (m1， n2, ***) 


其 中 a;= AP /Pov, 
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23. 


24. 
25. 


26. 


27. 


考虑 一 个 M/M/co 系 统 , 具 有 编号 为 1,2,… 的 通路 (服务 员 ) ,顾客 一 来 到 
就 挑选 编号 最 小 的 空间 通路 .于 是 我 们 可 以 认为 一 切 来 到 全 发 生 于 1 号 通 
路 , 发现 1 号 通路 忙 着 的 顾客 就 溢出 而 变 成 > 号 通路 的 来 到 。 .发 现 1 号 与 
2 号 通路 都 忙 着 的 顾客 就 溢出 2 号 路 , 变 成 3 号 通路 的 来 到 ,等 等 。 


(a) 1 号 通路 的 忙 时 占 多 少 比 率 ? 


(b)〉 通 过 考虑 相应 的 M/M/2 消失 系统 ， 确 定 2 号 通路 忙 时 的 比率 。 

(ce) 对 任意 < 写 出 c 号 通路 忙 时 的 比率 的 表达 式 。 

(d) 从 < 号 通路 到 c 十 1 号 通路 的 溢出 率 是 多 少 ? 相应 的 溢出 过 程 是 泊 松 
过 程 吗 ? 简要 地 解释 。 

(e) 者 服务 分 布 是 一 般 的 而 不 是 指数 的 ， 你 对 (a) 一 〈d) 的 回答 中 哪 几 
个 《如 果 有 的 话 ) 要 改动 ? 简要 地 解释 。 

证 明定 理 5. 7. 1 。 

(a) 证 明和 平稳 马尔 可 夫 过 程 是 可 道 的 ， 当 且 仅 当 它 的 转移 率 对 任意 有 限 
状态 序列 71，J12， os J 满足 

qj19J2)9 672973)° 9 (F171)9 (1,711) 
= g(a) Fan-1)°"9 (3,j2)4 C72, 71) 

(b》 论 证 只 要 验证 (a) 中 等 式 对 相 蜡 状态 的 序列 成 立 就 够 了 。 

(c) 假设 来 到 一 排队 系统 的 顾客 流 形成 一 速率 为 v 的 泊 松 过 程 旦 有 两 个 
工作 效率 可 能 不 同 的 服务 员 。 具 体 地 , 假设 顾客 在 ; 号 服务 员 处 的 服 
务 时 间 服 从 参数 为 yi 的 指数 分 布 ，; 一 1，2， 其 中 如 十 pa>v。 车 一 
来 到 的 顾客 发 现 两 名 服务 员 都 有 空 ， 则 他 等 可 能 地 被 分 配 到 任 一 服 
务 员 那 儿 去 。 对 此 模型 定义 一 个 恰当 的 连续 时 间 马 尔 可 夫 链 ， 证 明 
它 是 时 间 可 逆 的 ， 且 确定 极限 概率 . 

一 排队 系统 在 任 一 时 刻 的 工作 量 定义 为 该 时 刻 系统 中 全 体 顾 客 的 剩余 

服务 时 间 之 和 。 对 稳 态 中 的 M/G/1 计算 系统 工作 量 的 均值 与 方差 。 

考虑 一 个 处 在 稳 态 中 的 遍历 连续 时 间 马 尔 可 夫 链 , 其 转移 率 为 9g;。 BP; 

(j 之 0) 记 平 稳 分 布 。 假 设 状态 空间 被 分 成 两 个 子 集 8B 与 B=G.。 

(a) 计算 过 程 在 B 中 的 条 件 下 它 处 于 状态 i (i€E B) 的 概率 ， 即 计算 

P{XG) = iXG) €B) 
(b) 计算 过 程 刚 进入 B 的 条 件 下 它 处 于 状态 ; (iE€ B) 的 概率 ， 即 计算 
PIX() = i|X() €E B,XGU ) EG 
(c) 对 于 i€B8， 以 T; 记 已 知 过 程 处 于 状态 i 直到 它 进 入 G 为 止 的 时 间 ， 
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28. 


月 令 F(s)=E [e-7.j。 论证 
F,(s) = 7 (CYP; 十 2 Ps ] 
其 中 Pi 二 gij/ 2 9 
(d) 论证 和 
5 Hp HHPa, 
{fet jes {eB /ee 


(e) 利用 Cc) 与 (d) 证 明 : 
D2 PF (s) = 5) 》 Poy(l — FCs)) 


i jEB 


({) 设 过 程 刚 从 G 进入 B， 以 T, 记 直 到 它 离 开 B 为 止 的 时 间 。 利 用 
(b)〉 断 秆 
了 SF,Cs) Pq, 


Efe-] = “ESEC 


2 > Pg 


jEG kEB 


《g) 利用 Ce) 与 (论证 
> P; 一 >， > PQi; JELT.,] 


i€B iEG jy€EB 
(h) 设 过 程 处 于 B 中 的 一 个 状态 , 以 了 > 记 直 到 它 离开 B 为 止 的 时 间 . 利 
用 (a),， (e), (f) 及 (pg) 证 明 : 


Te 1 _ Ele** 1 
Ele 一 一 FF 
G) 利用 (h) 与 拉 普 拉 斯 变换 的 唯一 性 断定 
‘ PIT, > s}ds 
TH) ET 
Qj 利用 C 证 明 : 
_ EL[T?] ~ E[T,] 
ELT.] = 2E[T.,] 全 一 2 


随机 变量 T, 称 为 在 状态 集 B 中 的 逗留 时 间 , 它 表示 到 达 B 后 在 B 中 渡 
过 的 时 间 。 随机 变量 T,, 称 为 从 B 退出 的 时 间 , 它 表示 已 知 过 程 现在 是 
在 BB 中 但 还 要 留 在 B 中 的 剩余 时 间 。 上 述 结果 表明 , T- 与 工 , 的 分 布 之 
间 有 着 与 稳 态 下 的 更 新 过 程 的 剩余 寿命 的 分 布 与 相继 的 更 新 闻 的 时 间 
的 分 布 之 间 的 同样 的 结构 关系 。 

考虑 一 更 新 过 程 ， 其 来 到 间隔 分 布 玉 是 两 个 指数 分 布 的 混合 ， 即 F(z) 
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= pe "十 qe 24 二 1 一。 计算 更 新 函数 ELNG)J]。 
提示 : 设想 在 每 个 更 新 点 挪 一 枚 硬币 ,出 正面 的 概率 为 p。 车 出 现 正面 ， 
. 则 下 一 来 到 间隔 是 参数 为 41 的 指数 变量 ; 如 果 反 面 出 现 , 则 是 参数 为 
的 指数 变量 。 令 Rd) = i, 若 时 刻 的 指数 率 为 入。 则 
(a) 确定 已 (RD 二 1}y，i1 一 1,2 
(b》 论 证 

E[LNG)] = if PR = i}ds = [| A G)ds] 


其 中 A G3) 一 MAR。 
29. 考虑 例 5.8Ca) 的 两 状态 马尔 可 夫 链 ,其 XX (0) = 0。 
(a) 计算 Cov(XG),X(Cy))， 
(b) 以 ”tt) 记 到 :为止 状 态 0 的 占有 时 间 。 利 用 (a) 与 (5.8-4) 计算 
Var(Co(Ct))。 
30. 令 阅 二 XG 一 XG-p ,7 三 1,…,n 十 1, 其 中 六 (0) 一 0, Xry = 二 +t 日 
基 (1) Xo) Se SA) 是 ”= 个 独立 的 (0 :6 上 均匀 分 布 随机 变量 的 顺序 
值 。 论 证 P{Y; 志 yyivi 二 1 yn 十 1) 是 yy ,… ,yy 的 对 称 函数 。 
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6 
布朗 运动 与 其 它 的 马尔 可 夫 过 程 


6.1 引言 及 基本 定义 


我 们 从 讨论 对 称 随机 游 动 开始 ， 此 游 动 每 个 单位 时 间 等 可 能 
地 疝 左 或 向 右 走 一 个 单位 步子 。 现 在 假设 我 们 加 速 此 过 程 ， 在 越 
来 越 小 的 时 间 间 隔 中 走 越 来 越 小 的 步子 。 若 以 正确 的 方式 趋 于 极 
限 ， 我 们 得 到 的 就 是 布朗 运动 。 

更 精确 地 , 假设 每 隔 At 时 间 等 概率 地 向 左 或 向 右 走 一 步 , 步 
子 的 大 小 取 为 Arz。 行 以 和 (0 记 时 刻 上 的 位 置 ， 则 


(6.1.1) XC() =AzCXit Xi) 
其 中 
,。_ | 十 1， 车 长 为 Az 的 第 步 向 右 
”\ 一 1， 车 它 向 左 
有 假设 诸 X; 相互 独立 ， 
P{X,=1) = PK = 一 1 二 工 


2 
由 于 ELX;] 一 0，Var(X,) 二 ELX?:]= 二 1]， 由 (6.1.1) 可 见 
(6. 1. 2) EL[XG()|1=0 


VarCX(2)) 一 (Az)?| 堪 | 


现在 要 令 Az 与 At 趋 于 0, 然而 ,我们 的 做 法 必须 使 所 得 极限 过 程 
是 非 平 凡 的 (例如 ,着 令 Az==At， 再 取 At->0， 则 从 上 面 的 讨论 可 
见 EL[ 叉 (0)] 及 Var (XQ)) 将 同时 收 仑 于 0, 从 而 居 () 要 以 概率 1 
等 于 0)。 若 令 Az=c /4A，c 为 某 个 正常 数 ， 则 从 (6.1.2) 可 见 ， 
Ai-~>0 时 
EL[X(t)]=0 
Var(X(1))— ct 
现在 我 们 列 出 取 4Az=c ~vV At 并 令 At 一 0 所 得 的 极限 过 程 的 一 
些 直 观 性 质 。 从 (6. 1.1) 及 中 心 极限 定理 可 见 : 
QQ) XQ) 是 正 态 的 ， 均 值 为 0， 方 差 为 ct。 
此 外 ， 由 于 随机 游 动 的 值 在 不 相 重 兰 的 时 间 区 间 中 的 变化 是 独立 
的 ， 我 们 有 
(ii》{X(),t 宇 0) 有 独立 增 量 。 
最 后 ， 由 于 随机 游 动 在 任 一 时 间 区 闻 中 的 位 置 变化 的 分 布 只 依赖 
于 区 间 的 长 度 ， 看 来 有 
Qii) {了 (GG)，zt 宇 0} 有 平稳 增 量 。 


现在 我 们 已 为 下 列 定义 作 好 准备 。 
定义 ”随机 过 程 {X 2 ，t 之 0}》 称 为 布朗 运动 过 程 ， 若 
(1) XA(0)=0; 


(i) {XG)，t 宇 0} 有 平稳 独立 增 量 ; 

Qn) 对 每 个 上 >0, X(t) 服从 正 态 分 布 , 均值 为 0, 方差 为 c2。 

布朗 运动 过 程 ， 有 时 称 为 维 纳 过 程 ， 是 应 用 概率 论 中 最 有 用 
的 随机 过 程 之 一 。 它 起 源 自 物理 学 中 对 布朗 运动 的 一 种 描述 ， 这 
种 现象 ， 以 发 现 它 的 英国 植物 学 家 罗伯特 * 布朗 命名 ， 是 一 个 完 
全 浸没 于 一 种 液体 或 气体 中 的 小 粒子 显示 出 的 运动 。 自 从 它 被 发 
现 以 来 ， 这 过 程 被 有 效 地 应 用 于 这 样 一 些 领域 ， 如 拟 合 优 度 的 统 
计 检 验 ， 分 析 股 票 市 场 的 价格 水 平 及 量子 力学 等 。 

布朗 运动 现象 的 首次 解释 是 爱 因 斯 坦 于 1905 年 给 出 的 。 他 证 
明 ， 假 设 浸没 的 粒子 连续 不 断 地 受到 周围 介质 的 分 子 的 冲击 ， 布 
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妆 运 动 就 可 得 到 解释 。 然 而 上 述 简 洁 的 用 以 描述 布朗 运动 的 随机 
过 程 的 定义 是 维 纳 在 起 目 1918 年 的 一 系列 论文 中 给 出 的 。 

当 c 王 1， 这 过 程 常 被 称 为 标准 布朗 运动 。 由 于 任 一 布朗 运动 
总 能 转化 为 标准 过 程 , 为 此 只 要 看 X(2)/c 就 行 了 , 故 今 后 将 假定 
Cc 一 ]。 

把 布朗 运动 解释 为 随机 游 动 (6.1.1) 的 极限 提示 了 XG) 应 是 
t 的 连续 函数 ,情况 确 是 这 样 , 可 以 证 明 以 概率 1, XG) 确实 是 i 的 
连续 函数 ， 这 个 事实 非常 深刻 ， 本 书 不 给 出 其 证 明 。 我 们 也 应 指 
出 ， 尽管 得 知 (2) 的 样本 路 径 总 是 连续 的 , 但 它 决 不 是 普通 的 函 
数 。 因 为 正如 从 作为 随机 游 动 的 极限 的 解释 中 可 预料 的 ， 和 (GD) 总 
古 有 尖 角 的 , 因此 永远 不 会 光滑 , 事实 上 能 证 明 ( 虽 然 十 分 深奥 )， 
以 概率 1，X() 是 无 处 可 微 的 。 

独立 增 量 的 假设 蕴含 了 ， 在 时 刻 ;与 i 十 之 间 的 位 置 变 化 
( 即 关 (十 s) 一 X(s)) 与 过 程 在 时 刻 s 之 前 的 值 独立 。 因 此 

PiX(t++s) RalXG) = rz,Xu),0 Cu s) 

=P{X(+H)—XGRa—r|IXCG)=7r, Xu), OALus} 

=P(X(+)—X() Aa— x} 

=P{XCG+s) Ra|X(s) = xz} 
这 表明 给 定 现在 对 G(s) 及 过 去 六 (wu) (0 二 x 过 5s) 将 来 的 状态 基 ( 十 5s) 
的 条 件 分 布 只 依赖 于 现在 。 满 足 这 一 条 件 的 过 程 称 为 马尔 可 夫 过 
程 。 

由 于 飞 4) 是 正 态 的 ， 均 值 为 0， 方 差 为 上 *， 它 的 密度 函数 为 


1 2 
三 (>) — pe /21 
~ 2Xt 


由 平稳 独立 增 量 的 假设 容易 得 出 , X(t),…, 叉 (4,) 的 联合 密 
度 为 
(6. 1. 3) 
f(x 7 之 29  Tn ) 一 (CT) fi (Zs— XT1) "fr, 《Zu 一 Zn 1) 
利用 《〈6. 1. 3) ， 原 则 上 我 们 可 以 计算 任何 想 求 的 概率 。 例 如 ， 候 
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定 我 们 要 求 给 定义 (1) 二 B 时 X(s) 的 条 件 分 布 , 其 中 ;<i。 条 件 密 


度 是 
fT) flB 一 TT) 


fn lB) 一 三 (B) 

/zx (Br) 

=Kiexp( 3 2 —s) 

加 tt(z— Bs/t)’ 

=Koexp | 25 (一 了) 
因此 给 定 关 (2) 二 B 时 XX(s)(s 过 四 的 条 件 分 布 是 正 态 的 , 其 均值 及 
方差 为 . z 
(6. 1. 4a) ELX(s) |XG)=B]|= Bs/t 
(6. 1. 4b) Var(X(s) |XG)=B)=s(t—;s)/t 
有 意思 的 是 注意 到 给 定 关 (2)= 二 B 时 六 (s) 的 条 件 方差 G(s 二 2 不 依 


束 于 B81 也 就 是 , 硅 令 s/t 二 a,0 过 a 一 1, 则 给 定 兰 (2) 时 X(s) 的 条 件 
分 布 是 正 态 的 ,均值 为 aX(2), 方 差 为 a(l 一 a)t。 

从 (6. 1.3) 也 得 出 ,外 (21) , 关 (,),… ,六 (以,) 的 联合 分 布 是 多 元 
正 态 的 ,所 以 布 朋 运动 过 程 是 高 斯 过 程 , 这 里 我 们 用 到 了 下 列 定 
义 。 

定义 ”随机 过 程 {X(t) ,t 之 0; 称 为 高 斯 过 程 , 若 对 一 切 ，…， 
tn; 广 ( 直 ),…, 汪 (i ) 有 多 元 正 态 分 布 。 

由 于 多 元 正 态 分 布 完全 由 边际 均值 与 协 方差 决定 ， 所 以 布朗 
运动 也 能 定义 为 一 个 高 斯 过 程 ， 其 ELX() 二 0， 对 s 二 1 
Cov(X(s),X(t)) = Cov(X(s) ,Xs) + XG) — XC()) 

一 COV (X(s) ,XC(s)) HCov (XC XO— XCs)) 
其 中 最 后 的 等 式 来 自 独 立 增 量 性 及 Var CX(s))=s。 

设 {X(),t 之 0) 为 布朗 运动 过程 ,考虑 在 XQ)==0 的 条 件 下 ， 
过 程 在 0 与 1 之 间 的 值 , 即 考虑 条 件 随机 过 程 {X (CD ,0 委 : 委 11X 
(1 一 0}。 利 用 与 建立 (6.1. 4) 相 同 的 推导 ,我 们 能 证 明 这 过 程 是 高 
斯 过 程 , 它 以 布朗 桥 著 称 (因为 它 同时 在 0 与 1 被 固定 为 0) .我们 
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来 计算 它 的 协 方差 函数 。 因 为 由 (6. 1. 4), 对 s 二 1， 
E[X(s)|X(1) = 0]=0 
对 s 呈 t+ 之 1 我 们 有 
Cov [(X(s),X()) XU)=0] 
=E[X(s)X() |X(1)=0] 
=E[E[X( XG) XGA), XA)=0|X(1)=0] 
=ELX()E[X(s) XG) IXQ)=0] 


=E[X() TX() |X(1)=—0] (由 (6. 1. 4a)) 
=ELX?() IX(1)=0] 


一 二 上 (1 一 沪 (由 (6. 1. 4b) ) 


=s(l1—t) 
因此 布朗 桥 可 定义 为 均值 为 0, 协 方差 函数 为 (1 一 1) (s 达 iz) 的 高 
斯 过 程 ,这 导致 得 到 这 一 过 程 的 另 一 种 方法 。 

命题 6.1.1 

若 { 久 GG),t 宇 0} 是 布朗 运动 , 则 ZG)= 二 XG) 一 1 (1) 时 ， 
{Z() ,0 人 1) 是 布朗 桥 过 程 。 

证 明 由 于 {Z (2),t 之 0) 显 然 是 高 斯 过 程 ,我 们 需要 验证 的 只 是 E[Z 
Q0)]=0 及 st 时 Cov(Z(s),Z())==s(1 一 t)。 前 者 是 显然 的 ,后 者 得 自 

Lov(2 0) ,ZC)) = Cov(XCs) — sR XG) — 1X01)) 
=Cov(X(s), X(t))—tCov(X(s) ,XC()) 
—sCov(KX(1), XO)) HstCov (XX(), XO)) 
=s—-st— st st 
=s(1—£) 
证 毕 ， 

在 研究 经 验 分 布 函 数 时 布朗 桥 起 着 关键 作用 ,为 明白 这 点 , 设 
XX1,X，,… 为 独立 的 (0,1) 上 均 勾 分布 的 随机 变量 ,并 定义 N,(s) 
(0 一 s 一 1) 为 前 几 个 变量 中 小 于 或 等 于 s 的 个 数 ， 即 
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其 中 
1]， 若 XX; 二 5 
1(s) = | 
， 其 它 
随机 函数 PC) 一 六 (0<s 之 1) 称 为 经 验 分 布 函 数 。 我 们 
研究 它 在 ， -co 时 的 极限 性 质 。 


因为 N,(s) 是 参数 为 nx，s 的 二 项 分 布 随机 变量 ， 由 强大 数 
定律 得 出 ， 对 圈定 的 s，n 一 吕 时 以 概率 1 
F,(s)—>s 
事实 上 ， 可 以 证 明 ( 所 请 的 格 利 汶 科 一 一 康泰 利 定理 ) 这 收敛 关于 
s 是 一 致 的 。 即 以 概率 1，”ce 时 
SUP |F,(s) 一 | 一 0 
由 中 心 极限 定理 也 得 出 , 对 固定 的 s, Mn (CCs) 一 ?) 为 渐 近 正 态 
分 布 ,均值 为 0, 方 差 为 s(t1 一 :);， 即 


,1 _f YY 
Plols) < zi /2rs(] 一 二 | exp (a 一 3) ja 


其 中 
Qs) 一 Vn (F,(s) 一 3) 

我 们 来 研究 nx 一 22 时 随机 过 程 {a, (*) ,0 委 s 委 1} 的 极限 性 质 。 
首先 注意 到 ， 对 ;二 t， 给 定 N,(s) 时，N,(z) 一 NN,(s) 的 条 件 分 布 
正 是 参数 为 n 一 NC) 及 (t 一 s)/(1 一 s) 的 二 项 分 布 。 因此 利用 中 心 
极限 定理 ,a,(s) 与 a.(t) 的 渐 近 联合 分 布 看 来 应 是 二 元 正 态 分 布 ， 
事实 上 ,类 似 的 推断 可 合理 地 预料 到 极限 过 程 ( 若 存在 ) 是 高 斯 过 
程 。 为 了 知道 是 哪 一 个 高 斯 过 程 ,我 们 需要 计算 ELa,(s)j 及 Cov 
(a,《3) ,a,(t))。 现 在 

Ela,(s) |=0 
对 Os 夺 t 寺 1 
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Cov (a (5) at) ) 一 MOCOVCE (ss), F(t)) 


一 一 CovCN,C) ,NGD) 
_ ELELN,(s)N,(t) [IN,Cs) | j—ni?st 


nn 
E[ NG AN,(s) 十 CO 一 NODE | 一 at 


n 


=—s(l1—#) 
利用 NN,(s) 是 参数 为 x，s 的 二 项 分 布 变量 ， 再 简化 即 得 最 后 的 等 
式 。 
因此 极限 随机 过 程 是 一 个 高 斯 过 程 , 均值 函数 为 0, 协 方差 郴 
数 为 s(1 一 站 ,0 硅 s&t 人 1, 看 来 是 合理 的 (事实 上 能 严格 地 证 明 )。 
但 这 正 是 布朗 桥 过 程 。 z 
尽管 上 面 的 分 析 是 在 XX; 有 (0,1) 上 均匀 分 布 的 假设 下 进行 
的 , 它 的 适用 范围 可 放宽 ,只 要 注意 到 车 分 布 函 数 为 F, 则 下 为 连 
续 时 随机 变量 FCX;) 在 (0,1) 上 均匀 分 布 。 例 如 ,假定 我 们 要 对 任 
意 的 连续 分 布 研究 
Va suplF (Cr)—F(z)| 
的 极限 分 布 , 其 中 (x) 是 分 布 为 的 独立 随机 变量 X; 的 前 个 
中 小 于 或 等 于 z 的 比率 。 由 前 面 的 讨论 ， 若 今 
Qs) 二 Mn [CXiyi 二 1,… yn 中 使 F(X,) 过 s 的 个 数 ) 一 ;] 
一 [7 [CI 一 1 中 使 X; 志 Ff-1(s) 的 个 数 ) 一 s] 
= n [FF-1(s))—s)] 
=V/AF Cy) Fy)] 
其 中 yy 二 fT， (5s)， 则 (we，(G) ，0 委 s 魏 1) 收敛 于 布衣 桥 过 程 。 因 
此 Mn sup(F,(zx) 一 F(z)) 的 极限 分 布 是 布朗 桥 的 上 确 界 ( 或 最 大 
值 ,由 于 连续 性 ) 的 分 布 。 所 以 
limP{V n sup|F,(x)—F (zx) | =a) =P {max [1Z0Q)|<=a)} 
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其 中 亿 () ,0 委 : 委 1 ) 为 布朗 桥 过 程 。 


6.2 击 中 时 、 最 大 值 变量 及 反正 弦 律 


以 TT 记 布 朗 运 动 过 程 首次 击 中 a 的 时 刻 、 当 a> 之 0 时 ， 为 计 
算 P{T, 志 tz}, 我 们 考虑 P{XG() 之 a} 并 对 T, 志 t 是 否 发 生 取 条 件 。 
这 给 出 
(6. 2.1) P{X(t)>a}l=P{X() >alT,.<t}P{T.<t) 
+P{X(G)>alT, >tP{(T,>t) 
者 Zs 似 t, 则 过 程 在 L090,ij 中 的 某 个 点 击 中 a, 由 对 称 性 ,在 t 时 它 在 
a 之 上 或 在 a 之 下 是 等 可 能 的 , 即 


P{X()>alT,.<t)—5 
由 于 (6. 2. 1) 中 右边 的 第 二 项 显然 等 于 0( 因 为 由 连续 性 ,过 程 的 


值 不 可 能 还 未 击 中 a 就 大 于 aa), 可见 
(6. 2. 2) P{T,<t }=2P{X()>a} 


°° 2 
e /Ydr 


2 
~ ONAt “a 
2 | _y2/2 
一 一 一 一 ey/dy, a>0 
DNR ar > 
由 此 可 见 
， 2 2 2 
P{T, 一 co) = limP{T, <t)} = 一 | -za 一 1] 
全 ~/ 2 0 > 


此 外 ,利用 (6. 2. 2) 我 们 得 到 
EIT,] = | Pr. > t}dt 


-上 1 a dy dt 


e-» /2 ad yat 


-| 
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由 此 得 出 ，7. 虽然 以 概率 了 为 有 限 ,但 有 无 穷 的 期 望 。 也 就 是 布 
朗 运动 过 程 以 概率 1 迟早 击 中 ca， 但 它 的 平均 时 间 是 无 穷 的 。( 这 
直观 吗 ? 想 想 对 称 随机 游 动 。) 

对 a 二 0， 由 对 称 性 ，7。 的 分 布 与 T_。 的 分 布 相同 。 因 此 由 
(6. 2. 2) 我 们 得 到 


P(T,<t}=—4 


M27 | 一 
另 一 个 感 兴趣 的 随机 变量 是 过 程 在 [0,t] 中 达到 的 最 大 值 . 它 
的 分 布 可 如 下 得 到 。 对 a 二 0 
PlmaxX(s) 之 a ) 二 P(T。 二 t} (由 连续 性 》 
= 2P{X() > a) 
_ 2 一》 /2 dy 


yd 

”以 0(#1,t) 记 布 明 运动 过 程 在 区 间 (zt ,ts) 中 至 少 取 到 0 一 次 
这 一 事件 。 为 计算 P{0(# ,ts)) ,我 们 对 XG(1) 取 条 件 如 下 : 

l - -< /2 dx 
P{0Cz1,t2)) a | Pt{oG st2) [X(t)= xr)e d 
利用 布朗 运动 关于 原点 的 对 称 性 及 路 径 的 连续 性 得 
P{0(t1t2) [XC(1)=zr}=P{T, <t,—t) 
因此 ,利用 (6. 2.2) 我 们 得 到 


P{0(ti,t,)} = ! | ewe dy e/a dr 


oO 和 
A £1 (ft,—t]) 


e372 dy 
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上 列 积分 能 算得 明显 表达 式 
己 10(Ci it) 一 1 一 arc sin NV t/t, 


所 以 我 们 证 明了 下 列 
命题 6. 2.1 
对 0 二 x 二 1 


Pi{ 在 (zt,t) 中 没有 零点 )} 一 生 arc sin ~/ 和 


注 记 命题 6. 2. 1 并 不 使 我 们 惊讶 。 因 为 由 第 三 章 3. 7 节 末 
尾 的 注 记 我 们 知道 ,对 于 对 称 随 机 游 动 


P! 在 (zr,n) 中 设 有 零点 ) ~ arcsin AT 


当 n 一 吕 时 近似 式 成 为 精确 等 式 。 由 于 布朗 运动 是 对 称 随机 游 动 
跳跃 越 来 越 快 ( 牙 度 越 来 越 小 ) 的 极限 情形 ,直观 上 看 来 ,对 布朗 运 
动 上 述 近 似 式 应 成 为 等 式 。 命 题 6. 2. 1 证 实 了 这 一 点 。 

也 能 证 明 第 三 章 3. 7 节 的 另 一 个 反正 弦 律 (对 称 随 机 游 动 为 
正 的 时 间 的 比率 取 极 限时 服从 反正 弦 律 ) 对 布朗 运动 精确 地 成 立 ， 
即 能 证 明 下 列 命题 

命题 6. 2. 2 

对 布朗 运动 ,以 A() 记 在 L0,tj 中 过 程 为 正 的 时 间 , 则 对 0 二 xz 
<l， 


P{AGQ)/t<r}) = Sarcsin ys 


6.3 布朗 运动 的 各 种 变化 


这 一 节 中 我 们 讨论 布朗 运动 的 四 种 变化 ,第 一 种 假设 布朗 运 
动 一 达到 某 个 给 定 的 值 就 被 吸收 ,第 二 种 假定 它 不 能 变 为 负 的 ,第 
三 种 处 理 几 何 布朗 运动 ,而 第 四 种 为 积分 型 的 。 
6.3.1 在 一 个 值 处 被 吸收 的 布朗 运动 
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设 {X (2)) 为 布朗 运动 ,T, 为 它 首 次 击 距 的 时 刻 ,z>0。 记 
Z(z) 为 
X(t), 若 1 过 了 7， 
， 若 上 2 了。 
则 {2Z(2),t 宇 0} 是 击 中 后 永远 停留 在 那里 的 布朗 运动 。 
随机 变量 Z() 的 分 布 既 有 离散 又 有 连续 部 分 。 离 散 部 分 是 
P{Z(t)=zx}=P{T,<t) 


zO=| 


-A | dy (由 (6. 2. 2)) 
Nt 4 


对 于 连续 部 分 ,对 y<z 我 们 有 
(6. 3. 1) PIZ(DEY} SPX SEY, maxX(s)<r) 
PXWEyYT PIXDEY, maxX(s)>z)} 
计算 右边 第 二 项 如 下 : 
(6.3.2) PP (X() Ey, maxX(s)>7} 
PIXWSyImaxX(s)>z)P {maxX(s)>z) 
现在 注意 到 事件 maxX(s) 二 x 等 价 寺 事件 了,.<=z; 车 布朗 运动 过 程 
在 时 刻 荆 .(T, 一 力 击 中 zz, 那么 为 了 在 时 刻 t 小 于 y, 它 在 之 后 的 t 
一 了 ;时间 中 至 少 必 须 减少 x 一 y。 由 对 称 性 , 它 与 增加 这 个 数量 的 
可 能 性 是 相同 的 。 因 此 
(6. 3. 3) P (X(DEy|maxX(s)>7z) 
PX()F2r ylmaxX(s)>z)} 
从 (6. 3.2) 及 (6. 3. 3) 我 们 有 
P (X() Ey, maxX(s)>7) 
—PIX() 27 y,maxX(s)>z) 
=P{X()>27— y) (因为 y<<z) 
由 (6. 3. 1) 
PIZ (DEy}=P(IXG)SYy)—P{(XG)227r— y) 
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一 已 (和 (< 二 四 一 已 (和 < 委 y 一 2z) (由 正 态 分 布 
的 对 称 性 》 


1 > _ ,2 
一 e /2du 


of 3 一 2z 


6. 3.2 在 原点 反射 的 布朗 运动 
若 {X(),t 之 0} 是 布朗 运动 ,; 则 过 程 (Z(t) ,t 之 0} ,其 中 
Z(t2)= 1X()|, 1 之 0 
称 为 在 原点 反射 的 布朗 运动 。 
2 的 分 布 容 易 得 到 。 对 y>0 
P{(ZQ)<y}=P(XG)<Yy}— P(XG)Z—y) 
=~2P{X()y}—1 


一 5 | e /dx—l 
其 中 最 后 第 二 个 等 式 成 立 是 因为 X(t) 为 零 均值 的 正 态 变量 。 
容易 计算 ZG) 的 均值 及 方差 晶 
(6. 3. 4) E[20)] = 7, Var(Z(0))=| 1 一 全 |， 


6.3.3 几何 布朗 运动 
阁 {X() ,t 宇 0) 是 布朗 运动 , 则 由 
YC)=e*® 
定义 的 过 程 {YQ),t 宇 0} 称 为 几何 布朗 运动 。 
由 于 X(b 是 均值 为 0 方差 为 上 的 正 态 变量 , 它 的 和 矩 母 函 数 为 
ET[ exO] 一 pr /2 
所 以 
ElY() 1]=ELe*® ] 一 e2”2 ， 
Var(Y QQ))=ELY’G) 1]— ELY CG) 1)? 
=—Efex®H]—e 
在 建 模 中 认为 百分比 变化 (不 是 绝对 变化 ) 是 独立 同 分 布 时 几 
何 布朗 运动 是 有 用 的 。 例 如 ,假设 Yn) 是 某 种 商品 在 时 刻 的 价 
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格 。 假 设 Y(Cz)/YG 一 1)( 而 不 是 Y(z) 一 Y(2 一 1)) 独 立 同 分 布 可 
能 是 合理 的 。 令 
X=—=Y(n)/Y(n—1) 
取 Y(0)= 二 1, 则 
Y(n)=XIX,…X, 
所 以 
logY (n)= > logX， 


由 于 X; 是 独立 同 分 布 的 ,logY (n) 经 适当 正则 化 后 近似 于 布朗 运 
动 , 从 而 {Y(n)} 近 似 于 几何 布朗 运动 。 
例 6. 3(a) ”股票 期 权 的 价值 。 设 一 个 人 拥有 在 将 来 的 一 个 时 刻 了 以 图 
定 的 价格 玉 购买 一 股 某 种 股票 的 期 权 。 假 设 股票 目前 的 价格 为 y, 且 它 的 价 
格 按照 几何 布朗 运动 变化 ,我 们 来 计算 拥有 这 期 权 的 平均 价值 。 若 时 刻 T 的 
股票 价格 是 天 或 更 高 时 ,期 权 将 被 实施 ,因此 宅 的 平均 价值 为 
ELmax(Y CT)—K,0)]=|™ P{YT)— K>a}da 


-| PP{ye 一 区 ayda 
0 


=|- P{X(T)>log 人 十 4 da 


> 


6. 3. 4 积分 布朗 运动 
藻 (X(2) ,t 之 0} 是 布朗 运动 ; 则 由 
(6. 3. 5) ZW)=| Xa 


定义 的 过 程 (2(2) ,tz 之 0} 称 为 积分 布朗 运动 。 为 了 说 明 这 样 的 过 程 
如 何在 实际 中 发 生 ,我 们 有 意 建立 一 种 商品 的 价格 随时 间 变 化 的 
模型 ,以 Z() 记 在 时 刻 i 的 价格 ,与 其 假设 {Z (2)} 是 布朗 运动 (或 
几何 布朗 运动 ) ,我 们 宁愿 假设 Z() 的 变化 率 遵 循 一 个 布朗 运动 。 
例如 ,我 们 可 以 假设 商品 价格 的 变化 率 是 通货 膨胀 率 , 它 可 设想 为 
如 同 布朗 运动 那样 变化 。 因 此 


he” 
oxT 0 logL Fa/ dz da 
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d 
六 Qt 一 从 人 


ZK 一 Z(O) 十 | Xa 


从 布朗 运动 是 高 斯 过 程 可 得 {Z (1) ,: 之 0} 也 是 高 其 过程 。 为 证 
此 事 首 先 回忆 一 下 , Wi,，…，W 称 为 有 联合 正 态 分 布 ,， 若 它们 可 
表示 为 
下 ,一 > EL i 一 1] ……7? 


其 中 忆 ， U 王 1，…， mn) 是 独立 正 态 随机 变量 ， 由 此 可 得 Wi, **， 
W; 的 任意 一 组 部 分 和 也 是 联合 正 态 的 。 把 (6. 3. 5) 中 的 积分 写成 
近似 和 的 极限 就 能 证 明 Z(G),… ,ZG,) 联 合 正 态 。 

由 于 {Z 4) ,t 宇 0) 是 高 斯 过 程 , 它 的 分 布 由 其 均值 及 协 方差 铺 
数 刻 划 。 现 在 我 们 就 计算 它们 : 


E[Z()] = E| | Xas| 


= | ELXG)]as 
=—0 l 

对 入 : 

(6. 3.6) Cov[ZG),2G)]=ELZ()2Z0)] 
=E||.X()dy | XC)du | 


=E|[| | XX dyar | 
-| | ELX CX) Jdydu 


= | | min(y,u)adyadu 


ee 


一 一 一 
> 
ol 
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由 (6. 3.5) 定 义 的 4Z GD: 之 0)} 不 是 马尔 可 夫 过 程 。( 为 什么 不 
是 ?) 然而 ,向量 过 程 {(Z (5 ,X(D) 人 0) 是 马尔 可 夫 过 程 。( 为 什 
么 ?) 我 们 能 计算 Z4) ,XQ) 的 联合 分 布 ， 只 要 先 注意 到 根据 与 前 
面相 同 的 推理 可 知 ， 它 们 是 联合 正 态 的 。 为 了 计算 它们 的 协 方差 
我 们 利用 (6. 3. 6) 如 下 : 

Cov (Z(t) ,Z(t)—Z (th)) 
=—=Cov(Z(t),Z0))— Cov(Z(t) ,Z(t —h)) 


= 一 G4 一 A)| 2 一 | 


2 6 
=tih/2+o(h) 
然而 
Cov (Z(t) ,20)—2Z( ~—h)) 
一 Cov ZCD ,| Xds] 
i—h 
=~Cov(Z() ANRCG) oN)) 
=hCov(ZC), XO)) to() 
所 以 


Cov(Z GD) ,XC))=t/2 
因此 ,Zi ,X(t) 有 二 元 正 态 分 布 , 旦 
E[ZG)1=EL[LXG)]=0 
Cov(X(t),Z0))=+/2 
各 我 们 假设 价格 的 百分比 变化 率 遵循 一 个 布朗 运动 过 程 ， 可 
得 另 一 种 形式 的 积分 布朗 运动 .也 就 是 , 若 以 殉 ( 蕊 记 上 时 的 价格 ， 
则 
LW XO WY) 
dt 
或 
WO) =W(0)exp{ | XC)4s | 


其 中 {XQ)} 是 布朗 运动 。 取 W(0)=1, 我 们 看 到 
W(t) =e® 
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由 于 ZC) 是正 态 的 , 均 信 为 0 方差 为 如 | 务 一 所 =2/3, 可 见 
E[W(C)|]=exp{t'/6)} 


6.4 ”有 漂移 的 布朗 运动 


我 们 说 {X (2),t 宇 0) 是 漂移 系数 为 4 的 布朗 运动 过 程 ,大 
(1) XX(0)=0; 
Qi) {了 XX(),t 宇 0)y 有 平稳 独立 增 量 ; 
(iii) (服从 均值 为 Lt, 方差 为 1 的 正 态 分 布 。 
我 们 也 能 定义 它 为 X(2) 二 BC2) 十 jp, 其 中 (8(s)} 是 标准 布衣 运 
动 。 
因此 有 漂移 的 布朗 运动 是 一 个 以 速率 漂移 开 去 的 过 程 。 如 
同 布朗 运动 那样 ， 它 也 能 定义 为 随机 游 动 的 极限 。 为 了 明 凡 这 一 
点 ， 假 设 每 隔 At 时 间 ， 过 程 分 别 以 概率 p 及 1 一 p 按 正方 向 或 负 
方向 走 长 为 Az 的 一 步 。 若 令 
xi， 若 第 ; 步 是 正方 向 的 
一 1 其 它 
则 时 刻 上 的 位 置 和 Ci 是 
X()=Ar(Xi 十 XX[yw]) 
现在 
ELXG)]=AzxLt/At |(2p—1) 
Var(X())=(Azx)’[t/Azt LI 一 (22 一 1)2? 
因此 , 若 令 Ar 二 MCE,p== 方 (1 十 pV 要),At->0, 则 
E[LXG) J] 
Var[ X(t) J—t 
但 事实 上 {X 4) 收敛 于 漂移 系数 为 py 的 布朗 运动 。 
现在 我 们 对 此 过 程 计 算 一 些 感 兴趣 的 量 ， 我 们 从 过 程 在 击 中 
一 B 之 前 击 中 4 的 概率 开始 , 4，B 汪 0。 以 Plz) 记 这 事件 在 过 程 
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现在 处 于 z， 一 B<z<4 的 条 件 下 的 条 件 概率 ， 即 

P(z) 一 已 {X 人 在 击 中 一 忆 之 前 击 中 A1X(0)==z) 

对 过 程 在 时 刻 0 与 之 间 的 变化 了 一 久 (h) 一 X(0) 取 条 件 我 
们 将 得 到 一 个 微分 方程 。 这 给 出 
PCz) 一 五 [已 (z 十 YY) 十 o(P) 

上 面 的 op 是 到 时 刻 产 过 程 早已 击 中 4 或 一 B 中 的 一 个 的 概率 。 
假设 P(y) 在 工 点 附近 有 泰勒 级 数 展 开 ,形式 地 进行 可 得 

P(x)=ELP(z)+P(z)Y+P" (rx)Y?/2+* +o(h) 
由 于 了 是正 态 的 ， 均 值 为 xh， 方 差 为 kh， 我 们 得 到 
(6. 4. 1) 


Cr) 4th 2 户 ? 


P(x)=P(rx)+P’ (ruh+P’ 十 o( 有 hh) 


因为 所 有 大 于 二 阶 的 微分 项 之 和 的 均值 是 oCh)。 由 (C6.4.1) 有 


P' Cut te 2 = 


令 有 hh 一 0 
P’' (rr 


将 上 式 积分 ,我 们 得 到 
2HpP(z) 十 已 ' (z) 一 ci 


有 1 (TX) 
2 


或 等 价 地 
e”(2uP(x)+P’' (rz) =ce 
或 . 
和 (exeP(z)) 一 act 
一 积分 即 得 
es P(r)—=Cie ”+C, 
因此 


P(r)=C1+Ce 2 
利用 边界 条 件 P(4) 二 1,P( 一 8) = 二 0, 能 解 得 C, 及 CC， 
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从 而 
(6. 4. 2) P(X)T Ba 
因此 从 z=0 出 发 ,在 达到 一 8 之 前 先 达 到 4 的 概率 P(0) 为 


e23 一 1 


(6.4. 3) P{ 过 程 在 下 降 B 之 前 先 上 升 4} = FE 

注 放 

(1) 等 式 (6. 4. 3) 也 能 用 对 随机 游 动 取 极限 的 方法 得 到 。 因 为 
由 赌 徒 输 光 问题 ( 见 第 四 章 的 例 4. 4Ca)) 得 出 , 当 每 局 赌博 分 别 以 
概率 pp 及 1 一 p 上 升 或 下 降 Az 单位 时 ,在 下 降 B 之 前 上 升 4 的 
概率 为 


1 | B/Ar 
(6. 4. 4) msm 
1 一 | | 
(村 
当 /一 去 (1 二 waAz) 时 ,我 们 有 
.人 门 1 一 二 2 lin ] 一 CA 
im| p aa 十 AAAZ 


一 CE /er 


因此 , 令 Ax 一 0, 由 (6. 4.4) 可 见 
] 一 一 2 
了 {下 降 B 之 前 上 升 4} = 


它 与 (6. 4. 3) 相 符 。 
(2) 若 x 过 0, 由 (6.4.3), 邻 B 趋 于 无 穷 可 见 


(6. 4. 5) P{ 过 程 迟 日 上 升 4) 一 e2 
因此 在 这 情形 ,过 程 漂 向 负 无 穷 ,而 它 的 最 大 值 是 参数 为 一 
24 的 指数 变量 。 


例 6. 4(a) 实施 股票 期 权 。 假设 我 们 有 在 将 来 的 某 个 时 刻 以 辕 定 的 价 
格 4 购买 一 股 股票 的 期 权 , 与 现在 的 市 价 无 关 。 股票 现在 的 市 价 取 为 0, 并 假 
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设 它 的 变化 遵循 有 负 漂 移 系 数 一 4dC&>0) 的 布朗 运动 过 程 。 问 题 是 什么 时 候 
( 若 迟 早 要 做 ) 实 施 期 权 ? 
考虑 在 市 价 为 z 时 实施 期 权 的 策略 。 在 此 策略 下 我 们 的 平均 所 得 是 
P(x)(r— A) 
其 中 已 4z) 是 过 程 迟 早 到 达 z 的 概率 ， 由 (6. 4.5) 可 见 
P(r)=e *, 工人 0 
z 的 最 优 值 是 使 (z 一 4)e 六 最 大 的 值 , 易 见 它 是 
z 一 4 十 172C 

在 等 式 (6. 4. 3) 中 今 jy>0 可 得 ,对 布朗 运动 
(6.4. 6) ”PP( 布 朗 运 动 在 下 降 8 之 前 上 升 4)} 一半 

例 6.4 (b) 最 优 加 倍 策略 。 考 虚 两 个 人 为 一 笔 赌注 玩 某 种 随机 游戏 ， 
最 终 一 个 选手 成 为 胜 者 。 起先 一 个 选手 被 指定 为 “加 倍 者 ”, 这 意味 着 他 在 任 
何 时 刻 有 权 把 赌注 加 倍 。 潜在 一 个 时 刻 他 行使 这 个 权利 , 那么 另 一 个 选手 或 
者 退出 游戏 ,并 将 现在 的 赌注 付 给 加 们 者 ,或 者 同意 将 赌注 加 倍 并 继续 游戏 。 
若 另 一 个 选手 决定 继续 玩 下 去 , 他 就 成 为 “加 售 者 ”。 换 句 话说 , 每 一 次 加 售 
者 行使 其 权利 ， 加 倍 权 就 转 给 另 一 个 选手 。 

我 们 假设 游戏 是 观察 从 元 出 发 的 布朗 运动 。 若 它 在 到 达 0 之 前 先 击 中 
1， 则 选手 I 获胜 , 反之 则 选手 1 获胜 。 由 (6.4.6) 知 , 车 现在 的 状态 是 x, 游 
戏 继续 进行 到 结束 ， 则 选手 I 以 概率 zz 获胜 。 每 一 个 选手 的 目标 是 使 其 平均 
获 益 最 大 ， 且 我 们 假定 每 一 个 选手 在 博弈 论 意义 下 最 优 地 玩 游 戏 (例如 ， 这 
意味 者 一 个 选手 能 宣布 他 的 策略 ,而 另 一 个 选手 即使 知道 这 个 信息 也 无 法 玩 
得 更 好 些 ) 。 

直观 上 很 明显 最 优 策略 应 是 下 述 类 型 的 。 

最 优 策略 ”假设 选手 I(I) 有 加 倍 权 , 则 选手 IC 在 时 刻 : 加 倍 当 且 
仅 当 关 () 宇 p* (XC() 志 1 一 p*)。 选 手 H( 1) 的 最 优 策略 是 在 时 刻 t 接受 加 
倍 当 且 仅 当 X()p*“* (XQ) 宇 1 一 p*'")。 剩 下 的 是 计算 p' 及 p'*。 

引 理 1 p' 夺 p** 

证 明 ”对 任意 的 pp *, 半 XX()==p, 选 手 1 加倍 , 则 选手 工 就 退出 。 
因此 在 XX(2)==p 时 选手 工行 使 加 倍 权 就 能 保证 现 有 的 赌注 成 为 他 的 平均 收 
益 ,， 而 由 于 选手 工 总 能 保证 选手 I 不 可 能 获得 更 多 ( 若 选 手 I 加 倍 就 退出 )， 
故 得 出 选手 I 行使 加 售 权 必定 是 最 优 的 。 因 此 p'* 志 p"*。 
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引 理 2 也 "一 户 ”“. 

证 明 假定 妨 <2 7 。 我 们 要 证 明 选 手 I 有 比 p' 更 好 的 策略 ， 从 而 
得 出 巴 盾 。 具 体 地 说 ， 比 起 在 如 加倍， 选手 II 更 好 的 做 法 宁愿 是 等 待 X 
(z) 击 中 0 或 p"*。 如 果 它 击 中 p**"， 那么 选手 1 能 加 倍 ， 而 由 于 选手 I 将 
接受 , 所 以 选手 1 的 状况 与 在 加 "加 倍 完 全 一 样 。 另 一 方面 , 车 在 到 达 p"' 之 
前 击 中 0, 那么 在 新 策略 之 下 , 他 只 输 掉 原来 的 赌注 , 而 在 请 "策略 之 下 ， 他 
要 输 掉 加 倍 的 赌注 。 

因此 由 引 理 1 及 2, 只 有 一 个 临界 值 p"， 使 得 若 选手 I 有 加 倍 权 ， 则 他 
的 最 优 策略 是 在 时 刻 t 加 倍 当 且 仅 当 XG) 宇 p* ,类 似 地 , 选手 I 的 最 优 策略 
是 在 时 刻 上 接受 当 且 仅 当 XGO) 委 请" 。 由 连续 性 可 得 在 状态 为 p* 时 ， 两 个 选 
手 对 他 们 的 选择 都 是 不 在 乎 的 。 我 们 将 利用 这 一 点 来 计算 p*。 

设 赌注 是 一 个 单位 ,现在 车 选手 1 在 p* 加倍, 那么 选手 1 对 退出 还 是 接 
受 加 倍 并 不 在 乎 都 一 样 。 由 于 在 前 一 种 选择 下 选手 1 赢得 1， 我 们 有 

1 二 EL 车 选手 工 在 p* 接受 ,选手 I 的 收益 ] 

现在 知 选 手 1 在 p "接受 ,那么 I 有 下 一 次 加 售 权 , 只 要 和 GD) 击 中 1 一 户 " 他 
将 行使 这 特权 。 如 果 永 远 没 有 击 中 1 一 p"( 即 先 击 中 1), 则 工 输 掉 2 个 单位 。 
由 于 从 Pp* 出 发 在 到 达 1 之 前 击 中 1 一 p* 的 概率 按 (6.4.6) 是 (1 一 p*)/p*， 
我 们 有 


1 一 BC1 的 收益 | 击 中 1 一 p*] 了 一 2 一 


如 果 击 中 1 一 请， 那么 下 将 加 倍 赌注 到 4 个 单位 , 而 1 对 接受 与 否 并 不 在 乎 
都 一样 。 因 此 车 I 退出 ， 则 他 输 掉 2， 我 们 有 

EL I 的 收益 | 击 中 1 一 p*] = 二 一 2 
所 以 


1 一 一 2 人 2 


例 6.4 (c)。 控制 生产 过 程 。 本 例 中 我 们 考虑 一 个 随时 间 而 趋 于 恶化 
的 生产 过 程 。 具体 地 说 , 我 们 假设 生产 过 程 状态 的 变化 遵循 一 个 漂移 系数 为 
A，HA>>0， 的 维 纳 过 程 。 当 过 程 的 状态 为 B 时 ， 假定 过 程 就 停顿 ， 必 须 付出 
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费用 尺 使 过 程 回 复 到 状态 0。 胃 一 方面 , 在 达到 停顿 点 8 之 前 , 我 们 可 以 试 
图 修理 。 若 状态 为 + 且 作 了 尝试 去 修理 , 这 个 尝试 以 概率 w 成功, 以 概率 1 
一 ax 失败 。 若 尝试 成 功 ， 过 程 回 到 状态 0， 若 尝试 失败 ， 假 定 过 程 到 达 B 
( 即 过 程 停顿 )。 尝 试 一 次 修理 的 费用 是 C。 

我 们 要 决定 使 得 长 时 间 之 后 的 每 单位 时 间 的 平均 费用 为 最 小 的 策略 , 且 
这 么 做 时 ， 我 们 将 限于 过 程 状 态 为 -，0 二 zB， 时 尝试 修理 的 策略 。 对 这 
些 策略 , 回 到 状态 0 显然 构成 一 次 更 新 , 因此 由 第 三 章 的 定理 3. 6. 1 平均 费 


用 正 是 
(6.4.7) 研一 个 循环 的 费用 ] _ C+ RO 一 
E[ 一 个 循环 的 长 度 ] EE[ 到 达 x 的 时 间 ] 
以 f (x) 记 使 过 程 到 达 z 所 需 的 平均 时 间 。 对 时 间 h 中 的 变化 Y = X04) 
一 六 (0) 取 条 件 , 我 们 可 推导 出 一 个 f(z) 的 微分 方程 。 这 给 出 
f(z)=h+ Elf(rz— YY)]+o(h) 


其 中 o 心 ) 项 表示 到 时 间 六 过程 早已 击 中 = 的 概率 ,展开 成 泰勒 级 数 
jz) =h+ ELf(z) ~ Yf' (zx)+ = (x) + "…] 十 ol(h) 


=h+4 fr)— phf' x) + 2 Cx) + o(h) 


或 等 价 地 

1 = pf 7) 一 D+ 
令 h>0 
(6. 4. 8) l= pf (x) — fr (zx)/2 


与 其 直接 去 解 上 述 方 程 ， 不 如 先 注意 到 
f(z 十 y) = 二 EL[ 从 0 到 十 yy 的 时 间 ] 

二 五 [ 到 z 的 时 间 ] 十 E[ 从 zz 到 十 > 的 时 间 ] 

= f(r) + f(y) 
从 而 f(z) 具有 形式 (x) == cz, 并 由 (6.4.8) 可 见 c = 1/p。 所 以 

f(x) 一 和 /HL 
因此 由 (6. 4.7), 状态 为 ,0 二 x+ 二 8B, 时 尝试 修理 的 策略 的 长 时 间 之 后 的 平 
均 费 用 为 
A[C + RO 一 az) 


tT 


而 从 不 试图 修理 的 策略 的 长 时 间 之 后 的 平均 费用 为 
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Ry/B 

对 于 一 个 给 定 的 函数 a:, 我 们 能 用 微 积分 的 方法 去 决定 使 长 时 间 之 后 的 平均 
费用 最 小 的 策略 。 

以 了; 记 使 漂移 系数 为 x 的 布朗 运动 过 程 击 中 z 的 时 间 ( 者 
过 程 永 不 击 中 x， 令 它 为 2)。 我 们 将 对 z+ 二 0 计算 它 的 甜 母 别 数 
ELe ‘7T,j,9>0, 与 在 例 6.4(c) 中 计算 LT,j 的 方法 大 体 相同 。 
先 注意 
(6. 4. 9) 


Elexp{—07,;,}]=ELexp{—0T,TT,4,—T,.)}] 
=Elexp{—07,} jELexp{—0T,.4y—T,.)} 
=E[exp{—07,} J]E[Lexp{—07,)}] 

其 中 最 后 一 个 等 式 得 自 平稳 性 ,最 后 第 二 个 等 式 得 自 独 立 增 量 性 。 

但 (6. 4.9) 北 含 了 对 某 个 c 二 0 

Ele ”|= ee 
为 了 决定 c， 令 

f(r) = E[e- ”| 
对 工 一 AD) 一 汉 (0) 取 条 件 将 得 到 / 满足 的 微分 方程 。 这 样 做 给 
出 

f(z) 一 天 [exp{ 一 28 十 了 y)) 十 o(P) 
= e LAGz 一 Y)] 十 o(P) 
其 中 o(h) 项 来 自 到 时 间 过 程 击 中 之 的 可 能 性 。 将 上 式 展开 为 关 
于 xz 的 泰勒 级 数 得 
f(x) 一 e “ELf(x) — Yf' (x)+ 


Y? 
17" (7) + "| + oh) 


= eu fx) — phf’ (x) 十 7 Cz)] + oh) 


现在 利用 e “一 1 一 98h 十 ot(h) 给 出 
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Fa = fC — Oh) — phf’ (zx) 十 史记 (x) + olh) 


除 以 上 并 令 有 一 0 得 
gf x) 一 一 pr (x) 十 sf Cz) 


利用 (x) 二。e 
C2 

per — Wce “十 De”™ 

或 
十 2pc 一 20 二 0 

由 此 可 见 
(6.4.10) c= 二 一 上 十 VE 十 20 或 c= 二 一 2 一 VF 十 20 
由 于 cc 二 0， 可 见 当 py 之 0 时 

C= VA 20— J 
因此 
(6. 4-11) 

Ele-”*] = exp{~— XV 20 — 1)}, AL 之 0 


当 px 之 0 时 , 我 们 也 能 在 (6. 4. 10) 中 定 出 < 的 恰当 的 值 , 首先 注意 


到 由 于 
Efexp{— 9T,}] = | eodFr.Cy) 
得 me = P{T, < ooo) 
然而 由 等 式 (6. 4.5) 可 见 ， 当 w<0 时 
PT 一 co) = ew 
这 蕴含 了 这 时 <c 的 恰当 的 值 是 
c 一 一 pn 十 WE 十 256， yO 


综 上 所 述 我 们 有 下 列 
命题 6. 4.1 


以 工 , 记 漂 移 系 数 为 y 的 布 朋 运动 过 程 击 中 z 的 时 间 . 则 对 
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60,r>0,， 
Elexp{— 97,} | = exp{— zx(Vp 二 20 ~ 1)}") 

我 们 以 研究 最 大 值 变量 的 极限 平均 值 结束 本 节 。 具 体 地 我 们 
有 下 列 

命题 6. 4. 2 : 

若 {X (CD ，t 之 0) 是 漂移 系数 为 x，y 之 0 的 布朗 运动 过 程 ， 则 
以 概率 1 

maxX(s) 


.0 
lim 一 一 一 一 
i 


证 明 令 To=0, 对 z*<0,， 以 T, 记 过程 击 中 的 时 刻 。 从 平稳 独立 增 
量 的 假设 得 出 ,，T, 一 T,-1 (mn 之 1) 是 独立 同 分 布 的 。 因 此 我 们 可 以 把 看 作 
一 个 更 新 过 程 中 事件 发 生 的 时 刻 。 以 NG) 记 到 时 刻 i 更 新 的 次 数 ， 我 们 有 
(6. 4. 12 ) NG) < maxX(s) < NG) 十 1 
现在 由 例 6.4〈c) 我 们 有 ET = 1/p, 从 而 由 (6. 4. 12) 及 熟知 的 更 新 理论 的 
结果 NN(t)/t 一 1/ET' 得 命题 结论 。 


6.5 ”向 后 与 向 前 扩散 方程 


推导 出 微分 方程 是 分 析 马 尔 可 夫 过 程 的 一 个 有 力 技巧 有 两 
个 得 到 微分 方程 的 一 般 技 巧 :向 后 与 向 前 技巧 ,例如 我 们 要 求 随机 
变量 X(2) 的 密度 .向 后 方法 是 对 XX(4) 的 值 取 条 件 , 妓 回 到 时 刻 有 h 
的 过 程 来 看 各 种 情况 .向 前 方法 是 对 X(t 一 h) 取 条 件 。 

作为 一 个 说 明 ， 考 虑 漂移 系数 为 上 的 布朗 运动 过 程 ， 以 
P(rz,t;y) 记 X() 在 给 定 X(0) = y 时 的 概率 密度 ， 即 

plr,t;y) 一 limP {zx XG Lr ArIXO) = y}/Ar 
向 后 方法 是 对 X04) 取 条 件 ,形式 地 把 p(x,t;y) 看 作 是 概率 ， 我 
们 有 


* ) 原 书 此 处 有 误 ， 已 作 修改 。- 一 - 译 者 注 
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plrst;y) = ELP{X() 一 工 | 人 (0) = y, Ch)} | 

现在 

P {XG) = rzIXO) = y,XN) = zr,) 

~ P(XG—h)= zr|IX(0) = zr,) 
所 以 
prt;y) = EL[plx,t — h;X Ch)) | 

其 中 期 望 是 对 和 Cn) 取 的 , 它 是 均值 为 zh 十 yy, 方差 为 的 正 态 变 
景 , 假 设 上 式 右边 能 展开 为 (zx,t;y) 的 泰勒 级 数 ， 我 们 得 到 


plzstsy) = EFplrstsy) 一 大 prstsy) 


9 hh? 字 
二 (XX(h) 一 yy ByP Ty) 十 了 。 YP TY) 


(XCh) 一 yy 


+ 2 


Cs) 十 … 
9 9 
= PXTtsy) hiplrt;y) 十 ph ByP Tisy) 
十 作 Dip (zt3y) 十 oC(h) 
除 以 hk 并 让 它 趋 于 0 得 出 
(6.5.1) Fp) 十 J& ER 一 prstsy) 
方程 (6. 5. 1) 称 为 向 后 扩散 方程 。 
对 XX(z 一 A) 取 条 件 得 到 向 前 方程 。 既 然 
P(X(t) = zr|IX(0) = y,X(t — h) =a) 
= P{X(h) = x|X(0) = a) 
~ PW=x— a) 
其 中 W 是 均值 为 xh， 方 差 为 h 的 正 态 随机 度量 。 记 它 的 密度 为 
-fw， 则 有 
plzr,ti;y) 一 [fw — a)pla,t oo— h;yda 


=|[p(zst3) + GG —z) FP,tiy) hapstiy) 
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_ 2 
十 二 (3 十 jwkz 一 4a)da 
9 
= pz 一 ph p(tsy) — hp(ztsy) 


hh 地 
十 D3 rp xt;y) 十 o(P) 
除 以 4 并 令 它 趋 于 0 得 
了 ] 3 
(6. 5. 2) 3 Lab (rotsy) = pp(rtsy) 十 Fplsy) 
方程 (6. 5. 2〉 称 为 向 前 扩散 方程 。 


6.6 ”利用 柯 尔 莫 哥 洛 夫 方 程 求 极限 分 布 


向 前 微分 方程 方法 最 初 用 来 求 泊 松 过 程 No) 的 分 布 ， 它 对 
在 众多 的 各 种 模型 中 求 极限 分 布 是 十 分 有 用 的 。 这 一 方法 利用 时 
刻 t 系统 状态 的 分 布 计算 时 刻 t 十 有 状态 的 概率 分 布 ， 并 令 1->oe 
导出 一 个 微分 方程 。 现 在 我 们 说 明 它 在 几 个 模型 中 的 用 法 ， 其 中 
的 第 一 个 我 们 以 前 用 其 它 方法 研究 过 。 

6.6.1 半 马 尔 可 夫 过 程 

一 个 半 马 尔 可 夫 过 程 是 这 样 的 过 程 : 当 它 进入 状态 之 后 ， 在 
转移 之 前 返 留 一 段 随机 时 间 、 其 分 布 为 吾 ;， 均值 为 上 。 若 在 状态 
i 停留 的 时 间 为 <， 以 概率 Pi(z),i,j 之 0， 转移 到 状态 7。 我 们 
假设 所 有 的 分 布 瓦 , 是 连续 的 ， 定 义 其 失效 率 聘 数 A 和 (1) 为 

A0) = hh /H,G) 

其 中 ;为 瑟 ; 的 密度 , 因此 在 状态 i 停留 了 时 间 t 的 条 件 下 , 在 接 
下 来 的 dt 时 间 内 将 转移 的 条 件 概率 是 (cdt 十 o(Cdt)。 

者 把 任何 时 刻 的 “状态 ”看 作 (i ，z), i 是 现在 的 状态 , z 是 
过 程 自 进入 i 后 已 停留 的 时 间 ， 那 么 能 把 半 马 尔 可 夫 过 程 分 析 为 
马尔 可 夫 过 程 。 令 
pp 在 时 刻 t 状态 为 *, 自 进入 : | 

玉 的 时 间 丰 一 hh 与 之 间 


pli ,xX) = lim 
hi—0 
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即 p,，(i，z)》 是 时 刻 i 状态 为 〈，Z) 的 概率 密度 。 

对 z 之 0， 我 们 有 
(6. 6. 1) PisalisTt 二 hh) = px) Co ACTNh) d+-o0h) 
因为 要 使 时 刻 i 十 h 的 状态 为 (i ,x 十 4) ,过 程 必 须 在 时 刻 1 处 于 状 
态 (i,ZX), 且 在 接 下 来 的 h 时间 内 没有 发 生 转 移 , 假设 极限 密度 
pl,r) 一 limp, (i,z) 存在 ,在 (6. 6. 1) 中 令 t1 一 co, 我 们 有 


pli,x 十 有) 一 PT) 2 
h 


一 A(X)p(li,Xx) 十 
今 h>0， 有 
Episx) —— ANTI pli,z) 


除 以 p(i，x)〉 再 积分 得 


pli,X) 


Pl, 5 0y) 一 — | XWdy 


log( 

或 
pi,x) = pli,0)exp(— | way) 

等 式 〈 见 第 一 章 1.6 节 ) 

五 ;(z) = exp( 一 | coay) 
给 出 了 
(6. 6.2) pli,z) 一 pO,0)H,(z) 
此 外 , 由 于 过 程 以 概率 强度 区 (x)P;(zx) 瞬时 地 从 状态 ,zx) 转移 
到 状态 4 人 ,0) ,我 们 也 有 

pG,0) 一 也 | pO DN Psdr 


一 5 p03,0)| H(z)A (zr)P ;rdzr (由 (6. 6.2)) 
= Dp,0) | 已 (PiGz)adz 


| h(x)PiCz)dz 正 是 过 程 进入 状态 7 后 接着 进入 状态 ; 的 概率 。 
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把 它 记 为 P;， 我 们 有 
p(t,0) 一 > ，, 户 (7 0) 己 5 


现在 若 假 设 相继 的 状态 所 构成 的 转移 概率 为 了 ; 的 马尔 可 夫 链 是 
程 ， 故 得 对 某 个 常数 c 及 一 切 i 有 


(6. 6. 3) p(t0) = CT 
从 (6. 6.2) 对 Xz 积分 得 
(6. 6. 4) P{ 状 态 为 i) = pc,z)dz 
= pli,0)p 《由 (6. 6. 2)) 
= CT (由 (6, 6:.3)) 
由 于 27,P {状态 为 i ) 二 1， 可 见 
1. 
2 ts 
所 以 ， 由 (6. 6.2)〉 及 (6. 6. 3) 
C6. 6. 5) pli,r) 一 Ti 2 
注意 到 由 (6. 6. 4》 
(6. 6. 6) P{ 状 态 为 站 = 
及 由 (6. 6. 5) 


P{ 处 于 此 状态 的 时 间 过 >| 状态 为 让 一 | 全 ay 
因此 处 于 状态 i 的 极限 概率 由 (6. 6. 6) 给 出 ， 与 第 四 章 的 结果 相 
吻合 , 在 处 于 状态 i 的 条 件 下 , 已 在 此 状态 中 的 时 间 服 从 五 ; 的 平 
衡 分 布 。 

6.6.2 M/G/1 排队 系统 

考虑 M/G/1 排队 系统 , 来 到 是 速率 为 4 的 泊 松 过 程 , 一 个 服 
务 员 ,服务 时 间 分 布 是 G， 假设 G 是 连续 的 ， 失 效率 函数 为 Ci) 。 
这 个 模型 可 分 析 为 马尔 可 夫 过 程 , 阁 让 任 一 时 刻 的 状态 为 (n, zx)， 
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2 为 系统 中 那 时 的 人 数 ，z 为 正在 被 服务 的 顾客 已 服务 的 时 间 。 

以 p(n,z) 记 在 时 刻 t 状态 的 密度 , 当 % 之 1 时 有 
(6. 6.7) prys (nox h) 
: = pilnyx) (1 — XA)R) (CL — Wh) 

二 pln Oo 1,7z)Mh oh) 

上 式 成 立 是 因为 时 刻 : 十 时 的 状态 为 (x, x 十 h) 车 (a) 时 刻 上 时 
状态 为 (x, z), 并 在 接 下 来 的 h 时 间 内 既 无 来 到 也 无 服务 完毕 , 或 
(b) 时 刻 上 状态 为 (n 一 1，x) 并 在 接 下 来 的 上 时 间 内 有 一 个 来 到 
但 无 离 去 。 

假定 极限 密度 p(n,7)=limp,(n ;人 ) 存 在 ,从 (6. 6.7) 得 

p(n,X 十 人 一 p(n,Zx) 


=— QF AD Pa) + pl 一 1,z) 十 2 
邻 h>0 
(6. 6. 8) Fplnsz) = — A+ Az pnsz) 
十 Ap(n 一 1,Xx),， n 


VY 


现在 定义 母 函数 G(s,xz) 为 
G(s,X) 一 Ds"p ln,z) 


= 二] 


求 导数 得 
9 "dd 
0 ss) 一 2 FzP 2) 
一 > ,5s"[( 一 A— ACr))pln,z) 
太一 | 
十 Ap(n 一 1,x)] (由 (6. 6. 8)) 
= (Oo A ACr))GGs ,zr) 
两 边 除 以 G(s,z) 再 积分 得 
Gls,x)) 二 
[| (zr jaway 


”Li41。 


或 
(6. 6. 9) G(s,xz) = G(s,0)e -G(x) 


上 式 中 已 利用 了 等 式 
C(Cz) = exp 一 [acway) 
为 了 得 到 G(s,0) ,注意 到 对 于 p(n,0),n 放 0 的 方程 是 


|p nt1,7)A(z)dx, n>1 
p(n,0)= 
|pCnt1,z)A(r)drt+ PO, n=1 
其 中 
P(0) 二 了 (系统 是 空 的 ) 
因此 ， 


Ds"tip (ln, 0) 一 [Bp 二 1,Z)ACT)dz + 5:AP (0) 
n==1 


n=1 
或 
(6.6.10) ssG(s,0) = |‘GG,z) spl sx)Ar) dz 十 SAP(O) 


一 GGs,0) |e og) dz 


一 3 aa ,ZJ)ACZJCTr 十 52AP(CO) 
其 中 最 后 的 等 式 是 利用 等 式 (6. 6. 9) 的 结果 ， 为 了 计算 〈6. 6. 10) 
的 右边 的 第 二 项 ， 我 们 导出 一 个 PC0〉 的 方程 如 下 : 
P{ 在 时 刻 t 十 h 系统 空 ， 
一 P{ 在 时 刻 + 系统 空 }(1 一 6) 十 |4Cz)hp.C1,z)dz 十 oCh) 
邻 1 一 co， 然后 h 一 0 得 
C6. 6.11) AP(0) = | acpaazaz 
将 此 代 回 (6. 6. 10) 我 们 得 到 
sG(s,0) = Gs,0GCAC ~— s)) — sA(1 — s)P(0) 
或 
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sA(l — $s)P(0) 
EAI ss 
其 中 G(s) = |e-“dG(z) 是 服务 时 间 分 布 的 拉 普 拉 斯 变换 ， 
为 了 得 到 系统 中 人 数 的 边际 概率 母 函数 , 积分 (6. 6. 9) 如 下 
> sr"P (系统 中 有 人} 


(6. 06. 12) G(s,0) 一 


~ | G62az 

— GGs,0)| eC)dr 

- GG,0))| er acooaz 
= GG,0| | edzdGey) 


一 G(s,0) E 一 多 1 一 93 
= 也 | (1 一 )dGCy) 


G(s,0)(1C— GA — s))) 
A(l1 一 了) 


因此 ， 由 (6. 6. 12) 
2 了 {系统 中 有 人 ? 


SP(0)(C1 一 CCCL — s))) 

一 PO 二 oO 
GA — ss))—s 

__P(O)(C— s)GAC — 5)) 


CCL 一 5)) 一 5 
为 了 得 到 已 (0) 的 值 ， 在 上 式 中 今 * 一 1， 得 
1 一 JP{ 系 统 中 有 人 } 
(1 — s)G AC — s)) 


= P(0) lim 
1 GA —s))—s 


» 243， 


lim zl 一 3) 


一 P(0) Ti 
lim | 一 5S)) 一 5] 
(由 于 C(0) = 1 ,用 洛 必 达 法 则 ) 
PCO) 
1 AELSJ 


或 
P(0)= 1— AELS] 
其 中 ELS] = |zdG(z) 是 平均 服务 时 间 。 
往 记 
(1) 我 们 也 能 试图 从 一 1 开始 递 推 地 得 到 函数 p(n, xz), 并 
用 (6. 6. 8) 作 递 推 。 例 如 ,n= 二 1 时 (6. 6. 8) 中 右边 第 二 项 消失 了 ， 
因此 结果 为 


解 此 方程 得 
(6. 6. 13) p(x) = pl,0)e “G(x) 


故 
ac pd ,raz - pl1,0) [evgr)dz 


利用 (6. 6. 11) 得 
z AP (C0) = p(1,0)G CN) 
由 于 PO) = 1 一 LS], 可 见 
D1,0) = A(1 一 MELS]) 
CG) 


最 后 利用 (6. 6. 13) 我 们 有 
Me-x(l — AELS])G(x) 
GA) 
这 公式 可 代入 (6. 6. 8) , 则 p(2,z) 的 微分 方程 至 少 在 理论 上 
可 解 。 然 后 再 能 利用 pC(2,z) 去 解 p(3,) 等 等 。 
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(6. 6. 14) 万 (1 ,2Z) = 


(2) 从 (6. 6. 14) 得 出 ， 在 系统 中 只 有 一 个 顾客 的 条 件 下 ， 顾 
客 已 被 服务 的 时 间 的 条 件 密度 p(y|11) 为 
e VG(y) 
econay 


在 Cly) 二 1 一 e ”的 特殊 情形 ， 我 们 有 
PY11) = GQ pe “+t 

因此 ， 条 件 分 布 是 参数 为 4 十 4 的 指数 分 布 ， 不 是 平衡 分 布 
( 它 当 然 是 参数 为 y 的 指数 分 布 )。 

《3) 当然 在 上 述 分 析 中 为 使 极限 分 布 存 在 需要 条 件 
AELS |<1.。 

一 般 地 ， 如 采 我 们 对 计算 一 个 马尔 可 夫 过 程 {XG)} 的 极限 概 
率 分 布 有 兴趣 ， 那 么 利用 向 前 方程 是 合适 的 方法 。 另 一 方面 ， 如 
果 我 们 对 首 达 时 间 分 布 有 兴趣 ,那么 通常 向 后 方程 是 最 有 价值 的 ， 
也 就 是 在 这 种 问题 中 我 们 对 最 初 h 时 间 发 生 的 事件 取 条 件 。 

6. 6. 3 保险 理论 中 的 破产 问题 

假设 到 时 刻 上 一 家 保险 公司 收 到 的 赔偿 要 求 的 次 数 NGz) 是 
速率 为 4 的 泊 松 过 程 ,又 假设 相继 的 要 求 赔偿 金额 是 独立 的 ,有 分 
布 C。 乔 我们 假设 保险 公司 以 每 单位 时 间 1 元 的 常数 速率 收 到 保 
险 金 ， 则 时 刻 : 它 的 收文 相 抵 可 表示 为 


py|11) = 


其 中 zz 是 公司 的 初始 资本 , Y (i 宇 1) 是 相继 的 赔偿 要 求 。 我 们 感 
兴趣 的 是 公司 永远 有 偿付 能 力 的 概率 ， 它 是 初始 资本 z 的 函数 ， 
也 就 是 我 们 要 决定 

民 Cz) = Piz++t— 之 /了 >> 0, 对 一 切 z}) 
为 了 得 到 RCz) 的 微分 方程 , 我 们 用 向 后 方法 , 对 最 初 A 时间 发 生 
的 事件 取 条 件 。 若 无 赔偿 要 求 ， 则 公司 的 资产 为 <+h; 而 若 有 一 


个 赔偿 要 求 ， 则 它们 是 zh 一 YY。 因此 
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R(z) = R(z ho— Mp) ELRCGzY + h— YY) + oh) 


所 以 ， 
R(x + h) — R(x) 
h 


令 h 一 0 得 


2 


= AR(z 十 h) 一 AE[LR(z 十 h 一 了 )j] 十 


民 (TX) = ARCz) 一 AE[ R(x 一 Y)|] 
或 
R’' (1) = ARCz) 一 让 Rdz — yadGy) 


有 时 能 用 此 微分 方程 解 出 丸 。 


一 个 马尔 可 夫 发 射 噪声 过 过 程 


假设 震动 的 发 生 遵 循 一 个 速率 为 4 的 泊 松 过 程 。 与 第 i 次 震 

动 相 联系 有 一 个 随机 变量 X;( 之 1) 它 表示 震动 的 “ 值 ”。 假定 这 些 
值 是 可 全 加 的 , 且 它 们 以 一 个 决定 性 的 指数 速率 随时 间 而 衰减 .我 
们 记 

N (4)， 到 时 刻 t 震动 的 次 数 ， 

Xi， 第 ; 次 震动 的 值 ， 

Si， 第 i 次 震动 的 时 间 ， 
则 时 刻 t 总 的 震动 值 ， 记 为 X(z)， 能 表 为 


其 中 a 是 常数 ， 它 决定 了 指数 衰减 率 。 

当 假 设 诺 X，(i 宇 1) 独立 同 分 布 ， 且 {X;,i 之 1} 与 泊 松 过 程 
{NGQ),t 之 0} 独 立时 ,我 们 称 {(X (2),t 宇 0) 为 一 个 发 射 噪声 过 程 。 

发 射 噪声 过 程 具有 马尔 可 夫 性 ， 给 定 现在 的 状态 将 来 与 过 去 
条 件 独立 。 

我 们 能 计算 XQ) 的 和 矩 母 函数 , 先 对 入 () 取 条 件 , 然后 用 第 二 
章 的 定理 2. 3. 1， 即 给 定 入 (2) 二 n 时 不 讲 次 序 的 来 到 时 刻 是 独立 
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的 (0,1) 上 的 均匀 分 布 随机 变量 。 这 给 出 
Efexp{sX()} ING) = 1] = Elexp{s :Xe “UD )}] 


其 中 ,，…,U 是 独立 的 (0,t) 上 均匀 分 布 的 随机 变量 利用 独立 


性 将 等 式 继续 下 去 
Ef[exp{sX()}|ING) 一 中] = (Elexp{(sXie "0 }]) 


- [Fee was] 


=p" 
其 中 gx) = 二 AFLe* |] 是 XX 的 和 矩 母 了 消 数 。 因 此 
(6.7.1) El[exp{sX(1)} ] = Dp EY Ce 
一 8 


= exp{2| [$Cse-®) 一 1]dy) 

对 上 式 求 导 可 得 X(o) 的 矩 ， 我 们 留 给 读者 去 验证 
(6. 7. 2) E[X(2)] = AELz](1 — e “)/a 

Var[ XG)| = AELX?|(] ~ e 2**)/2a 
为 了 得 到 Cov(X (GD ,XG 十 s)) ,我 们 利用 表示 式 

XC 十 >) =e“X() (Gs) 
其 中 并 Cs) 与 XCs) 同 分 布 , 与 和 (GD) 独 立 , 即 束 (*) 是 在 (人 十?) 中 发 
生 的 事件 在 时 刻 t 十 s 的 作用 。 因 此 

Cov(X(1),X(t 二 5s) )=e “VarCX()) 
一 e “AE[X’:|(1 — e **)/2a 
在 (6. 7. 1) 中 令 :一 co 能 得 到 X(z) 的 极限 分 布 为 
limE[exp{sX()}] = exp{2| [ce-”) 一 1Jdy) 

现在 考虑 X; 是 参数 为 8 的 指数 随机 变量 的 特殊 情形 。 因 此 


$(u) 一 天 


wu 


所 以 ， 此 时 
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limE[exp{sX (2)}] — exp{2| | 六 — 1j ay| 
Af’s dx 
exp {| 0 一 ;| 
/8 ” 
加 人 一 3 
但 (0/(2 一 s))“ 是 参数 为 4/a 及 0 的 三 随机 变量 的 抢 母 函数 。 因 
此 ， 当 X; 是 参数 为 9 的 指数 变量 时 ，X(z) 的 极限 密度 为 


be “Oy ! 
(6.7.3) 1 = FD 0 < y < oo 


在 本 节 的 余下 部 分 我 们 就 假设 XX; 是 参数 为 9 的 指数 变量 ,日 
过 程 处 于 稳 态 之 下 。 对 于 后 一 要 求 ， 我 们 能 设想 X40) 按 照 分 布 
(6. 7. 3) 选 取 , 或 者 (还 更 好 些 ) 认 为 过 程 从 1 二 一 吕 起 始 。 
假设 X(t) 一?。 一 个 有 趣 的 计算 是 决定 自 最 近 一 次 增加 以 来 

的 时 间 的 分 布 , 即 上 以 前 最 近 一 次 泊 松 事件 以 来 的 时 间 的 分 布 , 称 
此 随机 变量 为 A(t)， 我 们 有 
《6.7. 4) 
已 {14() 全 5XCG) = y)} 
一 limP {ACz) > sy 过 XG)<y++h} 
jm Xt 一 5) < (GY 十 he" ,在 (i 一 5,t)》 中 无 事件 } 

hx0 Ply=X()<y++h} 
_ jim f(ye”)e"he “+ olh) 

h-=0 f(y)h + oh) 
~ exp(l— Oy(e” — 1)} 
应 该 指出 ,我 们 已 经 利用 了 过 程 处 于 稳 态 的 假设 而 断定 XX() 与 
义 (t 一 5) 的 分 布 都 由 (6.7.3) 给 出 。 从 (6.7. 4) 可 见 , 给 定义 (1)==y， 
A(z) 的 条 件 失效 率 隐 数 , 记 为 4(s|y), 是 
EP(AW SsIXO = y) 
P{AG) > s|IX() = y) 

一 Gaye” 

由 此 可 见 , 朝 着 最 近 一 次 事件 的 逆向 失效 率 在 时 刻 : 以 bay 的 速 
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AC(s|y) = 


率 开 始 ( 即 4401y) 二 bay), 按 时间 道 向 指数 地 增加 直至 下 一 个 事 
件 发 生 。 应 该 指出 ,这 显然 不 同 于 从 时 刻 i 至 下 一 个 事件 的 时 间 
( 它 当 然 是 与 X(4) 独 立 的 ,参数 为 4 的 随机 变量 )。 


6.8 平稳 过 程 


随机 过 程 {X 4) :之 0 站 称 为 平稳 过 程 , 知 对 一 切 12.55 9 四 
随机 向 量 和 CD，… 和 (与 XG 十 ?7)，…X( 加 十 *?) 有 相同 的 联合 
分 布 。 换 名 话说, 过程 是 平稳 的 , 若 取 任 一 固定 点 作为 原点 ,随后 的 
过 程 有 相同 的 概率 分 布 率 。 一 些 平稳 过 程 的 例子 是 : 

\ 遇 有 历 的 连续 时 间 马 尔 可 夫 链 {XGD) ,之 0) , 当 

PIX(0) = 7 = P,, 7 之 0 
时 ,其 中 {P;,j 宇 0} 是 平稳 分 布 。 

QD {XC),t 宇 0},X() 是 平衡 更 新 过 程 在 时 刻 t 的 年 龄 。 

GD (X(t 之 0), 针 () 一 NN 十 LL) 一 NG),t 之 0, 其 中 工交 0 
是 固定 常数 ，{NG),t 宇 0} 是 速率 为 4 的 泊 松 过 程 。 

上 述 前 两 个 过 程 是 平稳 的 原因 相同 :它们 是 马尔 可 夫 过 程 , 初 
始 状态 按照 极限 状态 分 布 选取 〈 故 它们 可 看 作 早 已 运行 了 无 穷 时 
同 的 遍历 马尔 可 夫 过 程 ) 。 第 三 个 例子 (其 中 XGO 表示 泊 松 过 程 在 
t 全 :十 志 之 间 发 生 的 事件 数 ) 是 平稳 的 得 自 泊 松 过 程 的 平稳 独立 
增 量 性 假设 . 

过 程 为 平稳 的 条 件 是 相当 严格 的 ， 所 以 我 们 定义 过 程 
{XQ()，i 之 0} 是 二 阶 平稳 的 或 协 方差 平稳 的 , 车 [X (4)] =c 及 
Cov (X(t) ,XC 十 s)) 与 + 无关 。 也 就 是 过 程 是 二 阶 平稳 的 (有 时 在 
文献 中 可 看 到 的 另 一 个 名 称 是 弱 平 稳 的 )， 若 X(z) 的 前 二 阶 矩 对 
一 切 t 相同 ,X(s) 与 XX) 之 间 的 协 方差 只 依赖 于 | 一 :| ,对 二 阶 平 

RKR(s) —= Cov(X() ,Xs 1)) 
由 于 高 斯 过 程 的 有 限 维 分 布 (是 多 元 正 态 分 布 ) 由 它们 的 均值 及 协 
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方差 决定 ， 由 此 得 出 二 阶 平 稳 高 斯 过 程 是 平稳 的 。 然 而 有 许多 二 
阶 平稳 过 程 不 平稳 的 例子 。 
例 6.8 (a) 自 回 归 过 程 。 设 Z.，Z, ，Z:,，… 是 不 相关 的 随机 变量 ,五 
[Z ,| 一 0,2 之 0. 日 
og/(1 一 和 2)， n=0 


Var(Z,) == 
og2, 7 之 1 
其 中 心 <1。 定 义 
《6. 8. 1) 兴 0 一 Zo 
《6. 8. 2) 人 一 人 X 1 十 QZ， n 之 1 


过 程 {X，， 7 之 0} 称 为 一 阶 自 回归 过 程 。 时 刻 的 状态 (X,)〉 是 时 刻 * 一 1 的 
状态 的 常数 倍加 上 一 个 随机 误差 项 (Z,)。 将 (6. 8. 2) 秋 代 得 
从。 一 A(CAA 十 Zr_1) 十 Z, 
一 2X。 十 MZ。 十 2 


一 3 如， 
1 一 0 
所 以 
nn nn 二 nm 
Cov(X,, Xam ) = Cov!( 2 XZ,, Dy 加 fn 


一 3 NMtm Cov(Z,,2,) 

一 ot"| 一 十 > | 

加 oA™ 

1] 一 入 
上 面 计算 中 利用 了 :和 7 时 2; 与 2 不 相关 的 事实 。 由 于 E[X,] 二 0， 可 见 
{X。，z0) 是 弱 平 稳 的 (对 离散 时 间 过 程 的 定义 明显 地 与 连续 时 间 过 程 的 定 
义 相 似 )。 
例 6. 8 (b) 动 平均 过 程 。 设 Wo。，, Wi， W,，… 是 不 相关 的 ，E[LW.] 二 

AK， Var(W,) 二 0 ，n 之 0， 对 某 个 正 整数 定义 


过 程 (X,， x 之 k} 称 为 动 平均 过 程 ， 在 每 个 时 刻 它 是 诸 W 的 最 近 的 十 1 个 
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值 的 算术 平均 。 利用 W,, nn 之 0， 互 不 相关 可 见 
(十 1 一 m)o’ 
一 一 一 一 一， 0 三 m 三 上 
Cov CX,, Xm) 一 (k++ 1): 者 
0 ， 若 m 之 上 


因此 ，{X,，?* 之 妨 是 二 阶 平稳 过 程 ， 
设 {X,,n 之 1} 是 二 阶 平稳 过 程 ，ELX。j 二 kx。 一 个 重要 的 问题 


是 什么 时 候 各 ,= >X,/n 收 敏 于 p。 下 列 命题 证 明 ，E[(X, 一 


4):] >0 当 且 仅 当 > Re 0. 即 马 , 与 4 之 差 的 平方 的 均值 
收敛 于 0 当 且 仅 当 RO) 的 极限 平均 值 收 化 于 0 

命题 6. 8. 1 

设 {X,,n 之 1} 是 二 阶 平稳 过 程 ， 有 均值 x 及 协 方差 函数 
R(i)=Cov(X,,X,t)， 令 卫 ,= > xn 则 

limE[LX" 2 二 0 

当 且 仅 当 
im >) RO -0 


no i 二 1 
证 明令 Y 一 Xi 一 p, 了 == Yi/n, 假 设 和 RG)/n 一 0 我 们 要 证 明 这 
蕴含 .Yj 一 0。 现 在 有 
E[Y?] = aE[ DY? + 22)2)Y.Y, | 


i Sn 


2 天 (7 一: 
RD ，2 儿 空 A5 


六 nz2 


我 们 留 给 读者 去 验证 ， 当 DJRG)/n -0 时 上 式 右边 趋 于 0。 
另 一 方面 假设 ECY:] >0， 则 


一 1 ROCi) 2 ] 万 2 
[=| 广 DDcov O77)] 
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= [Cov(Y ,7 )]: 
一 [E(YLY,) J 
< EL[Y?]ELY:] 


这 证 明了 ,no 时 RG)/n~0. 读 者 应 注意 到 上 面 利用 了 柯 西 一 许 瓦 效 不 
等 式 : 对 随机 变量 X 与 7 了 ，(E[XY])*<<E[X*]ELY?] (见习 题 26)， 


习 起 


工 . 


~ 


在 习题 1，2 与 3 中, 设 {X(),t 实 0) 为 布朗 运动 过 程 。 
令 Y(t) = 1X(/) 
《a)Y(#) 的 分 布 是 什么 ? 
(b) 计算 Cov(Y(s),Y (1)) 
(c) 论证 {YQ),t 之 0} 也 是 布朗 运动 。 
(d) 邻 T= inf{:> 0:X() 一 0) 
利用 (c) 给 出 P{T 一 0} = 1 的 论证 。 


. 令 玉 (0 一 和 (at)/asa > 0. 验 证 {W(),t 0) 也 是 布朗 运动 。 
: 计算 给 定 关 (1) 二 A,X(i) 二 B 时 XX(s) 的 条 件 分 布 ,其 中 二; 二 如。 
- 设 人 (00 委 上 委 ] 为 布朗 桥 过 程 - 证 明 : 若 XG) = 二: 十 DZG/G 十 1))， 


则 { 久 (2),t 之 01 是 布朗 运动 过 程 。 


。 随机 过 程 {X(t)，t 之 0} 称 为 平稳 的 ， 若 对 一 切 MyQ3t (ev 


和 (5) 与 XGO 十 aa) 十 4a) 有 相同 的 联合 分 布 。 

(a) 证 明 : 高 斯 过 程 为 平稳 的 充 要 条 件 是 Cov(X(5) ,XC()) 只 依赖 于 上 一 9， 
st 及 ELX(G)]= es 

(b) 设 {XQ),t 之 0) 为 布朗 运动 ,定义 VG) 一 e-“?X(e”)。 证 明 : {VG),t 
之 0) 是 平稳 高 斯 过 程 . 它 称 为 奥 恩 斯 坦 一 乌 伦 佩 克 过 程 。 


设 iX (0) ,t 之 0) 为 一 个 生 灭 过 程 , 它 人 允许 取 负 值 ,有 常数 生 灭 率 三 4, 


圭 pn 二 0, 土 1, 圭 2,…。 定 义 4 与 c 为 4 的 函数 ,使 得 14 一 吕 时 {cX()， 
t 之 w} 收 伍 于 布朗 运动 。 
在 习题 7 到 12 中 , 设 {X(),t 之 0) 为 布朗 运动 。 


. 求 下 列 变 量 的 分 布 : 


(a) |X() | 
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(b)| min XCs) | 
Os 
Cc) max% (s) 一 X(t) 
Ot 
&. 设 X(i) 二 互 . 按 命题 6. 1. 1 的 方式 , 刻 划 X(1) = B 的 条 件 下 的 {X(),0 牵 
< 1)。 
9. 今 MGi) = maxX(s), 证 明 ; 
Ort 


P{M()>alMGO)=X())=e ,a>0 
10. 计算 布朗 运动 首次 击 中 的 时 间 7, 的 密度 函数 。 
11. 以 了 记 小 于 i 的 XQ) 的 最 大 零点 ,以 了 记 大 于 i 的 最 小 零点 .证明 : 
(a P{T, < ss} = (2/x)arccos /i/s, st 
(b)PI7 < ss,T, > y} = (2/r)arcsin /ss/y, st<y 
12. 验证 (6. 3. 4) 中 给 出 的 |X(2) | 的 均值 与 方差 的 公式 。 
13. 对 漂移 系数 为 y 的 布朗 运动 证 明 : 对 xX 二 0 
Pimax |X(s) | 之 xX}==0(h) 
14. 以 !z 记 布 衣 运 动 首次 击 中 的 时 间 。 计 算 : 
P(T,<T.,<T.,) 
15. 对 漂移 系数 为 pz 的 布朗 运动 , 令 
f(z) 王 EL 首次 击 中 4 或 一 B 的 时 间 1Xo 一 z] 
其 中 4 二 0,8 汪 0, 一 8B 二 rx< 二 4， 
(a) 导出 f(z) 的 微分 方程 。 
(b) 解 此 方程 。 
(c) 用 随机 游 动 取 极 限 的 论证 方法 ( 见 第 四 章 习 题 17) 验证 Cb) 中 的 解 。 
16. 以 1 记 深 移 系数 为 上 的 布朗 运动 击 中 < 的 时 间 。 
(a) 导出 ja ,六 PIT 委 旨 满足 的 微分 方程 。 
(b) 对 w>0, 令 gr) 一 Va(T) ,对 gz)z 盖 0, 导 出 微分 方程 。 
(c)(b) 中 的 g(z),g(y) 与 g(x 十 y) 之 间 有 什么 关系 ? 
(d) 解 出 g(x)。 
(e) 通过 对 (6. 4. 11) 求 导 验 证 你 的 解 。 
17. 在 例 6.4(b) 中 ,假设 Xe = z 及 选手 1 有 加 倍 权 ,; 计 算 这 种 情况 下 了 I 的 平 
均 启 得 。 
18. 设 {( 久 (4),t 之 0} 是 不 允许 取 负 值 的 漂移 系数 为 x(py 二 0) 的 布朗 运动 , 求 
(1) 的 极限 分 布 。 
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19. 考虑 有 反射 壁 一 B 及 4 的 布朗 运动 ,A 这 0,8 放 0, 以 plz) 记 XQ) 的 
密度 晴 数 。 
(a) 导出 p.(z) 满足 的 微分 方程 。 
(b) 求 p(xz) = limp, (zx). 
20. 证 明 : 对 漂移 系数 为 x 的 布朗 运动 ,概率 为 1,: 一 时 
X(t) 
sy o£ 


21. 证 明 : 
plz,t;y)= l PA 
ZTE 
满足 向 后 与 向 前 扩散 方程 (6. 5.1) 与 (6. 5. 2)。 
22. 验证 等 式 (6. 7. 2) 。 
23. 验证 当 {(N(i)} 是 泊 松 过 程 时 {XG) = NG 十 ZL) 一 NG),t 之 0) 是 平稳 
的 。 
24. 设 U 服从 (一 x,x) 上 均匀 分 布 , 令 X, = cos(nU)。 利 用 三 角 恒 等 式 


coszcosy 一 广 [cos(z 十 y) 十 cos(z 一 y] 
25. 证 明 : 
RO 。 RO-D) 
2 0 交合 疡 党 20 
从 而 完成 命题 6. 8. 1 的 证 明 。 
26. 证 明 柯 西 一 许 瓦 兹 不 等 式 : 
(ELXY ]):<ELX?]E[LY?| 
(提示 :以 不 等 式 2|zy| 夺 zz 十 开始 ,然后 以 X/vVE[X?:] 代 xz, 以 Y/ 
人 ELY?:] 代 yy) 
27. 对 均值 为 x 且 2 RGi)/n 一 0 的 二 阶 平稳 过 程 ,证 明 :对 任意 0,n— co 
时 
2 P(X pl>e) -> 0 
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7 
随机 游 动 与 加 


引 


了 路 


设 Xi， 入 2， … 独 立 同 分 布 (ld ) ， 日 ELIX.,|] ~ oo0。 令 So 一 0， 
5,= 2 X, n 之 ] 。 过 程 (5;,n 宇 0} 称 为 随机 游 动 过 程 。 


为 多 种 多 样 的 现象 建立 模型 时 随机 游 动 十 分 有 用 。 例 如 ， 我 
们 以 前 遇 到 过 的 简单 随机 游 动 (P{X,==1}==p==1 一 P{X= 一 1})， 
其 中 的 5, 可 解释 为 一 个 赌 徒 在 x 局 赌博 之 后 的 赌 金 , 在 每 一 局 中 
他 赢 或 输 一 个 单位 的 钱 。 我 们 也 可 用 随机 游 动 为 更 一 般 的 峙 博 建 
立 模型 例如， 许多 人 相信 ， 一 家 指定 的 上 市 公司 的 股票 的 相继 
的 价格 能 建 模 为 随机 游 动 。 我 们 将 看 到 ， 在 分 析 排 队 与 破产 系统 
中 随机 游 动 也 是 有 用 的 。 

在 7.1 节 中 我 们 给 出 一 个 对 偶 原理 ， 它 在 求 得 有 关 随 机 游 动 
的 各 种 概率 时 十 分 有 用 . 这 节 中 最 后 一 个 例子 处 理 G/G/1 排队 系 
统 ， 在 分 析 它 时 我 们 被 引导 到 去 计算 一 个 平均 步子 为 负 的 随机 游 
动 迟 早 超过 一 个 给 定 的 常数 的 概率 。 

作为 上 述 计算 的 前 奏 ， 在 7. 2 节 中 我 们 介绍 一 类 随机 过 程 
一 一 堵 ， 它 给 出 了 公平 赌博 概念 的 数学 定义 。 建 立 了 扶 的 一 些 性 

* 256 * 


质 ， 并 在 7. 3 节 中 应 用 于 随机 游 动 。 特 别 我 们 能 近似 地 得 到 ， 而 
在 某 些 情形 能 用 明显 表达 式 算出 ， 一 个 随机 游 动 迟早 超过 一 个 定 
值 的 概率 。 然后 在 7.4 节 中 它们 被 用 于 G/G/1 排队 系统 与 破产 问 
题 。 

随机 游 动 也 能 被 看 作 更 新 过 程 的 一 种 推广 ,因为 大 X; 被 限制 
为 非 负 随机 变量 , 则 S; 能 被 解释 为 一 个 更 新 过 程 的 第 ”个 事件 的 
时 刻 。 在 7.5 节 中 我 们 给 出 了 布 菜 殉 威 尔 定理 的 一 个 推广 ， 其 中 
的 X; 不 要 求 是 非 负 的 ， 并 指出 了 一 个 基于 更 新 理论 的 结果 的 证 
明 。 

在 本 章 的 最 后 一 节 我 们 回 到 研究 款 这 一 类 重要 与 有 用 的 随机 
过 程 上 来 。 在 这 节 中 我 们 给 出 了 重要 的 热 收敛 定理 ， 并 用 它 证 明 
强大 数 定律 而 结束 本 节 。 


7.1 随机 游 动 中 的 对 偶 


设 
S, = Sx,, 1 之] 


为 随机 游 动 。 在 计算 有 关 {5S,, ”之 1} 的 概率 时 , 有 一 条 对 偶 原 理 ， 
尽管 它 是 显然 的 ， 却 十 分 有 用 。 

对 偶 原 理 

《有 1， 入 2， 加 二 鬼 ， X,) 与 (X,,X,_1，,"… ,XX!) 有 相同 的 联合 分 布 。 

由 于 Xi,i 之 1, 是 独立 同 分 布 的 ， 因 此 立即 可 得 此 对 偶 原 理 成 
立 。 我 们 将 在 一 系列 的 命题 中 一 明 它 的 用 处 ， 

命题 7. 11 说 , 若 玖 LIXJ 之 0, 则 随机 游 动 在 有 限 的 平均 步 数 之 
后 变 为 正 的 。 

命题 7.1.1 

设 Xl， 兴 2， … 是 独立 同 分 布 随机 变量 ， HB ELX]>0, 各 

NN 一 min(n: 六 | 十 … 十 卫 , 计 0) 
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则 

ELN |<o0o 
证 明 
ELN]J= VPIN>n) 


= DP{XISO0, XTX SO XK) + 十 XX,<<0) 
开 一 自 


= SD\ POX,SO KX, + ,10,7 K++ XO) 
为 二 站 


其 中 最 后 的 等 式 得 自 对 偶 原 理 ， 所 以 


C7. 1. 1) E[N]= >) P{S,<S, 1,5,<5,2,. ,58,<0) 
太 二 必 
我 们 说 一 个 更 新 在 时 刻 n 发 生 ， 如 时 SS》 1， <SS。?， 机 So<< 0; 即 每 


当 随 机 游 动 达到 最 低 时 一 个 更 新 发 生 .( 略 为 想 一 想 应 使 我 们 确信 ,相继 的 更 
新 间 的 时 间 确 实 是 独立 同 分 布 的 .) 因此 ， 由 等 式 (7. 1. 1)， 
ELN] 一 之， P{ 在 时 刻 ” 发 生 更 新 ) 
一 1 十 五 [发 生 的 更 新 数 ] 
现在 由 于 五 L[X] 之 0， 由 强大 数 定律 得 S, 一 co， 所 以 发 生 的 更 新 数 (以 概率 
1) 是 有 限 的 。 但 是 发 生 的 更 新 数 或 者 是 无 穷 的 , 如果 F(co) (相继 的 更 新 闻 的 
时 间 为 有 限 的 概率 ) 等 于 1; 或 者 服从 均值 有 限 的 几何 分 布 , 如 果 F(co》<1，。 
由 此 
互 [发 生 的 更 新 数 ] < 
从 而 
五 [LN 一 co 
下 一 个 命题 讨论 随机 游 动 取 新 的 值 的 平均 速率 问题 。 我 们 定 
义 R,， 称 为 (So,S1，,… ,5S,) 的 变 程 ， 如 下 。 
定义 ”R, 是 C456,S1,…5,) 中 的 不 相同 的 值 的 个 数 。 
命题 7.1.2 
jim 了 -一 pp{ 随 机 游 动 永 不 回 到 0) 


n 


| 1 ， 若 Si 尖 S ii，Se St ， 
,= 


“'*. Si So 
0， 其 它 
则 


从 而 


E[R,]=1+ SY\P{L=1) 


二 一 1 


一 1 十 > PISi Se SHIR» 9""" ,S40} 


二 一 上 


一 1 十 > 已 { 富 天 0,X 十 大 天 0 十 Xi 十 … 十 大; 天 0] 
一 1 


二 1 十 了} P(X i 关 0,Xi 十 Xs 尖 0,… ,3X 十 十, 关 0) 
其 中 最 后 一 个 等 式 得 自 对 侦 原 理 。 因 此 


(7.1.2)  E[R,J=1+ DjP{SI#0,SA#0,.… ,SA0)} 
kl 


= PT 月 


其 中 了 是 首次 回 到 0 的 时 刻 ,现在 Ac 时 
PIT>k} 一 忆 IT 一 ce) 一己 (不 回 到 0) 
故 由 (7. 1.2) 可 见 


ELR,j/n 一 已 (不 回 到 0) 


PIX., 


例 7. 1(a) 简单 随机 游 动 。 在 简单 随机 游 动 中 P{X: 一 1) 一 一 1 一 
一 1) ,现在 当 p 一 考 ( 对 称 简单 随机 游 动 ) 时 ,随机 游 动 是 党 返 的 , 因 


PP{ 不 回 到 0}==0 
从 而 如 > 也 时 


ELR,/n|—»0 
p 一 本 时 , 令 x 一 已 ( 回 到 0|1X 一 1)。 由 于 已 ( 回 到 01Xi= 一 1} 一 1( 为 什么 ?) 我 
们 有 


Pt 回 到 0) 一 xz 十 1 一 声 


se。 209 。 


也 对 XX 取 条 件 得 
a=o p+1—p 
或 等 价 地 
(a—1)(ap—1~p)=0 
由 于 非常 返 性 ,a 二 1, 可 见 
a= (1—p)/p 
所 以 ,p> 了 时 
EL[LR./n|— 2p—1 
类 似 地 ,< 也 时 
ELR,/n| ~— 2(1—p)—1 


对 偶 的 下 一 个 应 用 是 处 理 对 称 随机 游 动 的 。 


命题 7.1.3 
在 对 称 简单 随机 游 动 中 ,对 一 切 关 0, 在 回 到 原点 之 前 到 达 
状态 的 平均 次 数 为 1。 


证 明 对 >>0, 以 Y 记 首次 回 到 原点 之 前 到 达 状 态 * 的 次 数 ,那么 Y 
可 表 为 


Y= >),7。 
其 中 
7 一 (> 车 在 时 刻 nn 到达 状态 ,nn 之 前 未 回 到 原点 
n 0， 其 它 
或 等 价 地 
7 一 (> 若 S,>0,S,_1 启 0,9,_: 祈 0 ,91 >0,S, 二 上 
” lo， 其它 
从 而 


E[Y] = 2 P{S,>0, S.-i1>0, , $1>0, 5,=k) 
n 二 1 


一 >) 己 {XX 十 … 十 XX 二 0， 用， 1 十 和 十 天 | 人 0， 
天 一 1 
及 10， ,十 … 十 叉 | 一 大) 


= > P { 尺 十 … 十 四 ,之 0， 六 ;十 一 十 X, 这 0，…， 
=1 


XD>0， 居 十 …… 十 磋 。 一 到) 
其 中 最 后 一 个 等 式 得 自 对 偶 原 理 。 因 此 
E [Y] = jyP{S,>0, 8,>81, %, S$,>5,1, S,=k} 


= /了 {对 称 随机 游 动 在 时 刻 n 首次 击 中 此) 
二 P{ 对 称 随机 游 动 迟 早 击 中 } 
一 1 (由 常 返 性 ) 
证 毕 * 。 
最 后 将 对 偶 原 理应 用 于 G/G/1 的 排队 模型 。 这 是 一 个 单 服务 
员 模 型 ， 顾 客 遵 循 一 个 更 新 过 程 来 到 ， 它 有 任意 的 来 到 间隔 分 布 
£， 服务 时 间 分 布 为 Go 记 来 到 间隔 时 间 为 义 1， 入 2， “9 服务 时 
间 为 Y1，Y;,，…， 第 个 顾客 在 排队 中 的 等 待 时 间 为 D,。 由 于 第 
n 个 顾客 在 系统 中 化 费 掉 时 间 D, 十 Y,, 第 n 十 1 个 顾客 在 第 ”个 顾 
客 之 后 XX.+i 时 间 来 到 ， 故 ( 见 图 7. 1.1) 
DY, 一 Xm， 车 Ds, 十 Y, 之 Xt 


D+i = i 
0 9 在 已 ,十 多 < 入 ,il 
或 等 价 地 ， 令 U, 一 了 ,一 X41， nn 之 1， 
(7. 1. 3) Dri=max {0, DD,t+U,}, n 之 0 


释 代 (7. 1.3》 得 
力 ， 一 max (0， 万 ,十 [7 
一 max (0, U,+-max {0, D, j++U,.1}) 
=max (0, U,, U,+U, 十 万 |) 
=max (40, U,, U, 二 +U, 1+max {0,U,_,+D,,})} 
一 max 40, U,, UntTU, 1 UU 1+U, ;+ D,_,} 


—1Inax {0， U,，, UU,_i1, 9 L 十 已 1 十 … 十 ZN 


* 读者 应 将 此 证 明 与 第 四 章 习 题 31 中 所 勾画 出 的 证 明 作 比较 。 


1 D, 『 Y, ' 
t 各 1 
ae 二 eat 二 aa 
第 nn 个 第 n 个 第 n+1 第 nn 个 
来 到 进入 服务 ”个 来 到 离 去 
或 者 
Xn+1 | 
! Dr ' Y， 4 
一 NX. 
第 nn 个 第 于 个 第 4 个 ”第 mt+L 个 来 到 
来 到 进入 服务 离 去 并 进入 服务 


图 7.1.1 万 一 max( 刀 .十 7 ,一 瑟 。 30} 
其 中 最 后 一 步 利 用 了 Di 一 0 的 事实 。 因 此 ,对 c<>0， 
已 (万 1 疡 c)} 一己 Imax(0:D 9D 十 7， 十 … 十 CD) 之 c) 
一 已 tImax(0Z LN 十 Do 十 … 十 DC 

其 中 最 后 的 等 式 得 目 对 偶 原 理 。 从 而 我 们 有 下 列 

命题 7.1.4 

设 D, 是 G/G/1 排队 系统 中 第 7 个 顾客 在 排队 中 的 等 待 时 
间 、 来 到 间隔 时 间 为 X;(i 宇 1)， 服 务 时 间 为 Yi 宇 1)， 则 对 (二 0 
(7.1.4) ”PiDiri 之 c} 二 PP( 随 机 游 动 Si 7 全 1 ,到 时 刻 ” 越过 c} 
其 中 


J 


Dj 二 2 (Y;—X,;+1) 
由 命题 7. 1.4， 我 们 也 看 出 P{D,+1 之 c} 关 于 非 降 。 今 
P{D,>c) =limP (DD, 这 c) 


由 (7. 1.4) 我 们 有 
(7. 1.5) P\D- 之 c) 一 Pi 随机 游 动 S7 之 1, 迟早 越过 <) 
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若 ELUj] 二 ELYj] 一 ELXj] 是 正 的 , 则 由 强大 数 定律 ,随机 游 动 将 趋 
于 无 穷 ,所 以 若 EL7Y]ELXj, 对 一 切 c 
P{D, 之 c}=1 
上 述 结论 在 ELYj] 二 ELXj] 时 也 成 立 , 从 而 仅 在 ELY jj 二 ELXj 时 存 
在 极限 等 待 分 布 .这 时 为 计算 P{D.,>>c} 我 们 需要 计算 一 个 平均 变 
化 为 负 的 随机 游 动 迟 早 越过 一 个 常数 的 概率 ,然而 ,在 考虑 此 问题 
之 前 , 先 引 进 拷 的 概念 是 十 分 有 用 的 。 
7.1.1 关于 可 交换 随机 变量 的 一 些 注 记 
为 了 得 到 对 偶 原 理 并 非 必 须 假 设 随 机 变量 于 ，… ,XX, 为 独立 
同 分 布 的 。 一 个 较 弱 的 一 般 条 件 是 这 些 随 机 变量 是 可 交换 的 ， 我 
们 说 是 1， 0 是 可 交换 的 ， 如 果 对 (1 2， ,1) 的 一 切 置 换 (i, 
…， 记 )，X，*…，X 有 相同 的 联合 分 布 。 
例 7.1(b) 从 一 个 最 初 装 有 ?2 个 球 ( 其 中 & 个 白 球 ) 的 饶 中 不 放 回 地 随 
机 取 球 。 若 令 
， _ 11， 车 第 次 取 到 白 束 
0， 其 它 
则 XX ，…，X, 是 可 交换 的 ， 但 不 独立 。 
作为 说 明 利 用 可 交换 性 的 一 个 例子 , 假设 Xi 与 X; 是 可 交换 
的 9 (Zz) 与 g (XT) 为 增 了 消 数 , 则 对 一 切 瑟 1 ,2 
(f(x)— f(r2)) (g(x1)— gr) )0 
这 药 含 了 
EL (f(X1)—f(X,))(g(X1)—g(X,) 0 
但 可 交换 性 又 蕴含 了 
ELf(XI)g(X) |=ELf(X,)g(X,) | 
ELf(Xi)g(X,) =ELf(X,)g(X,) | 
将 上 列 不 等 式 展开 即 可 见 
ELf(Xi)g(X1) ELf(X)g(X,)] 
特别 者 Xi 与 和 独立 ,我 们 有 下 列 
命题 7.1.5 
» 263， 


若 了 与 g 都 是 递增 图 数 ， 则 
ELf(X)g CX)JEELfX) ELg CX)] 
随机 变量 的 无 穷 序 列 X;，X,，… 称 为 可 交换 的 ， 夺 每 个 有 限 
子 序列 X,，…，X, 是 可 交换 的 。 
例 7.1 (e)” 设 人 4 为 随机 变量 , 分 布 为 G。 假设 在 事件 4=4 的 条 件 下 ， 
Xi，Xs，… 为 独立 同 分 布 ， 分 布 为 Pi， 妈 
PXI， £0, XSAN = 1 Fz) 


随机 变量 入 1， 入 2， … 是 可 交换 的 ， 因为 
PIXl&xI »""" x,<) = {I Fdd60) 


关于 (zi1,… ,Zz,) 是 对 称 的 ， 然 而 它们 不 是 独立 的 。 

有 一 个 以 德 费 奈 蒂 定 理 著 称 的 结果 ， 它 说 每 个 可 交换 随机 
变量 的 无 穷 序列 有 例 7. 1 (c) 所 规定 的 形式 ,我 们 将 给 出 X; 是 0 一 
1( 即 贝 努 里 ) 随 机 变量 时 的 证 明 。 : 

“定理 7.1.6( 德 . 费 奈 蒂 定理 ) ”对 每 一 个 可 交换 的 取 值 0 或 
1 的 随机 变量 入 1， 从 2， … 的 无 穷 序 列 ， 对 应 有 一 个 L0,1j] 上 的 概率 
分 布 G， 使 得 对 一 切 0 和 ES” 
(7.1.6) 三 {(X 一 X 一 … 一 Xi 一 1，X 一 … 一 X 一 0) 


=| MG 一 DG 
证 明 设 mr 宇 x。 我 们 首先 对 


S。 一 >,X, 
取 条 件 来 计算 上 述 概率 。 这 导致 
(7. 1.7) 己 {X 一 … 一 Xi 一 1 Xi 一 … 一 X 一 0} 
= ,P(X = =X=1, X= =X,=0|S,=j}P{S, =)) 


7 一 1)… (kk 二 1) nO— N79 I—1)…(m—j— (nm—k)+1) 
m(mO— 1 (22 一 3 十 1) 


Mi: 


| 


Pi{Snm= 放 
推 得 最 后 一 个 等 式 是 因为 在 S»==j 的 条 件 下 由 可 交换 性 可 知 , Xi,，…，Xw 的 
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每 一 个 由 > 个 变量 组 成 的 子 集 都 以 同样 的 可 能 性 是 全 由 1 组 成 的 集合 。 
令 Y, 一 >， 则 (7.1.7) 可 写成 


(7. 1. 8) P{X|l=**"=—=X,=1,， X41 二 … 一 化, 一 0} 


[| Do CmYm— RF DEm— YY) mY 1 nlm—Yn) On 二 十 1] 
=E| 
mm— 1 mm—nt 1) 


对 充分 大 的 m, 上 式 大 致 等 于 ELYm (1 一 了 。)J”“, 只 要 令 m 阅 吕 就 证 得 定理 。 
事实 上 利用 一 个 称 为 赫 利 定理 的 结果 能 够 证 明 ， 对 某 个 趋 于 的 子 列 m'， 
Yw 的 分 布 收敛 于 一 个 分 布 C， 而 47. 1. 8) 将 收敛 于 


E[ 了 GO 一 Ze) 人 =| dl —y)" ‘dG(y) 
注 认 ”对 可 交换 随机 变量 的 有 限 序列 ， 德 . 费 奈 带 定理 不 成 
立 。 例 如 ， 若 在 例 7.14) 中 取 n%n= 二 2,k 二 1, 则 P{Xl=1,X,= 二 0)= 
P(X 一 0,X; 二 1) 二 妈 ,它们 不 可 能 写成 (7. 1. 6) 的 形式 。 


7.2 辕 
随机 过 程 {2,,n 之 1} 称 为 靳 ， 如 果 对 一 切 
E{|Z,|}<o0 
及 
(7. 2 ] ) 歼 LZ |Z; ,QZ D |] 一 Z 


黄征 公平 赌博 的 一 种 推广 。 假若 我 们 把 Z 解释 为 一 个 赌 徒 局 之 
后 的 赌 金 ， 那 么 (7. 2. 1) 是 说 他 在 ”十 1 局 之 后 的 平均 赌 金 等 于 他 
在 局 之 后 的 赌 金 ， 不 论 以 前 发 生 怎样 的 情况 。 
对 (7. 2.1) 式 取 期 望 得 
E[Z,.+1]= ELZ,) 
所 以 ,对 一 切 ?= 
E[Z,|= ELZ:] 
著 的 几 个 例子 (1) 设 和 4，X:，… 为 独立 随机 变量 ， 均 值 为 0; 令 2 


= 之 / 筷 ， 则 {Z,,m>1) 是 鞭 ， 因 为 
E[Z,+1 12 9 ,一 五 [Z ,十 Xi 1Z "Z| 
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一 五 [|Z， 12， 9""" ,ZZ 十 EL 避 ,+41 [12 和 ,DZ 
=2,+ ELX,+1] 
一 乙 ， 


(2) 车 XY，Xs，… 为 独立 随机 变量 ，E[X,] 二 1, 风 z.= [Lx 时 , (2 
?之 1} 是 蒜 。 这 是 因为 
E[Z2Z+1121,.°" , 2 = ELZ,X,+1 |21,***Za 
=—2Z,ELZ,+1 |Z1,*"* ,2 
= ZELX,+ | 
=2Z, 
(3) 考虑 一 个 分 支 过 程 ( 见 第 四 章 4.5 节 )， 以 X; 记 第 n 代 的 总 量 。 者 
m 是 每 个 个 体 的 平均 后 代数 ， 则 
ZZ =, /mm" 
时 ，{Z,，n 之 1} 是 靳 。 我 们 把 证 明 留 作 练习 。 
定义 ” 正 整 数值 (可 能 取 无 穷 值 ) 的 随机 变量 N 称 为 过 程 
(Z.,z 之 1 的 随机 时 间 , 如 果 事 件 { 广 一 如 由 随机 变量 21，…， A 决 
定 ， 也 就 是 ， 知 道 Z1!，…，Z 就 告诉 了 我 们 是 否 有 人 入 二 n。 硅 
PtV<c} 一 1， 随 机 时 间 N 称 为 停 时 。 
设 N 是 过 程 42.,” 之 1 的 随机 时 间 ， 令 


过 Z,， 若 2” 委 从 


ZN， 者 nN 
(2 n 之 1} 称 为 停止 过 程 。 
命题 7.2.1 
若 入 是 拷 (2;) 的 随机 时 间 ， 则 停止 过 程 {2,} 也 是 团 。 
证 明 今 
jo /1 若 N 之 n 
”lo, 若 N<n 


也 就 是 ， 若 观察 Z1，…，Z-1 之 后 我 们 没有 停止 ， 则 1, 二 1。 我 们 说 成 立 等 
式 
(7. 2. 2) 2Z,=2Z, ,十 7 (Zs—Z,1) 
为 了 验证 (7. 2. 2〉 考 虑 两 种 情况 : 
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() NE 这 时 过.=Z,，Z i 二 2Z,_1，T, 一 1]， 故 得 (7. 2.2) 。 
Qi) N 二 n， 这 时 21 一 2Z, 二 Zw， 了 J, 二 0， 故 得 (7. 2. 2)。 
现在 有 z 
(7.2.3) Ef2,|Z1,% ,2 1]= ELZ2,_1+1,(2,—2Z,1) 121,**…*2,1] 
=Z, 111ELZ,—Z, 1|Z1," ,Zu1) 
=Z,1 
其 中 最 后 第 二 个 等 式 成 立 是 因为 2,1 与 1 都 由 21，…, 2,-1 决 定 , 而 最 后 一 
个 等 式 成 立 是 由 于 (2, 为 团 。 : 
我 们 必须 证 明 EL[LZ,|21,… ,2,-1] 二 24-16 然而 (7. 2- 3) 已 蕴含 这 个 结论 ， 
因为 各 我 们 知道 Z1，…，2，-! 的 值 。 那 么 我 们 也 知道 Z1，…，2Z,-1 的 值 ， 更 
正式 地 ， 我 们 有 
E[Z2, 12Z),.… ,2,11] 
=ELELZ,|Z1,° 2 1 | 21 "2.1] 
=E[LELZ,|Z21," ,2 1]|Zu ,2,1 
= E[Z,_1|Z21,* ,2Z,_1 | (由 (7.3. 3)) 
二 ,1 
由 于 停止 过 程 也 是 堵 ， Z1=Z1， 故 对 一 切 >” 
(7. 2. 4) E[LZ,]=ELZ,] 
现在 假设 随机 时 间 入 是 停 时 , 即 P{(N<co} 王 1。 由 于 
Z,， 若 7 夺 和 N 
“一 Zn， 若 m 生 NN 
故 得 充分 大 时 2 等 于 Zv， 因 此 ”>coe 时 以 概率 1 
Z, > Zw 
那么 在 n> 时 
(7. 2. 5) E[2, | 一 五 LZNj 
是 否 成 立 呢 ? 由 于 对 一 切 n,EL2,j=ELZ,], (7. 2. 5) 就 是 说 
ElZnj= ELZ| 
实际 情况 是 在 某 些 正则 性 条 件 下 (7. 2. 5) 确 实 成 立 , 我 们 不 加 证 明 
地 叙述 下 列 定 理 。 
定理 7.2.2 车 或 者 〈i) 2, 一致 有 界 , 或 者 (i) N 有 界 , 或 
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者 (ii) 五 LN 和 ce, 且 存 在 一 个 MWM< 王 ce 使 得 
EL |2,41—Z,l |Z1 ,Z, <M 
则 (7.2.5) 成 立 ， 从 而 
ELZnj= ELZ'] 
定理 7. 2. 2 说 ， 在 一 个 公平 的 赌博 中 ， 如 果 赌 徒 使 用 一 个 停 
时 去 决定 什么 时 候 退 出 ， 那 么 他 的 最 后 的 平均 赌 金 等 于 他 的 初始 
的 平均 赌 金 。 因 此 在 均值 的 意义 下 ， 痢 定理 7.2. 2 中 的 充分 条 件 
之 一 满足 ， 那 么 成 功 的 赌博 系统 是 不 可 能 有 的 。 
系 7.2. 3 瓦尔 德 等 式 ) 
若 站: (i 宇 1) 为 id，E[|X|] 二 o,N 是 X,, 久 ;,… 的 停 时 ， 
ELN jj<~, 则 
E[ >,X;]= ELNJELX] 
证 明 令 y=E [X]。 由 于 
Z,.— > (X;— £) 
是 著 ， 倘 若 定 理 7. 2.2 可 应 用 ， 则 得 
E[LZn]=E[LZ,]=0 
但 是 
E[2v1~EL SX ~] 


=E[ Sx,— Ne] 


EL D2,X,]—ELN]¢ 
为 了 证 明定 理 7.2. 2 可 应 用 , 我 们 验证 条 件 Gi)。 现 在 Zs4 一 2Z, 一 XX,+1 一 AP， 
故 
EL [Zi+1 Zn | 1 2 9 ;Zn 二 EL | (Xi —py| |Z) 9 ,之 | 
=EL|X,r—p|J 
ELIX|]+p 
例 7. 2 (a) ”计算 直到 一 种 给 定 的 花样 出 现 的 平均 时 间 . 假设 序 贯 地 观 
察 一 列 独立 同 分 布 的 离散 随机 变量 , 一 天 一 个 。 直 到 某 个 给 定 的 序列 出 现 必 
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须 观察 的 平均 次 数 是 多 少 呢 ? 更 具体 地 ， 设 每 次 观察 的 结果 分 别 以 概率 二 ， 


总 及 到 为 0, 1 及 2, 我 们 希望 求 直到 游程 020 出 现 为 止 的 平均 时 间 , 例如 ， 


赫 观 察 结果 的 序列 是 2，1，2，0，2，1,，0，1，0,，0，2，0， 则 所 需 的 数 六 
等 于 12。 

为 了 计算 ELNJ, 设想 有 一 列 赌 徒 在 一 个 公平 的 赌场 参 赌 ， 每 人 起 初 都 
有 1 元 ,第 i 个 赌 徒 在 第 :天 的 开始 赌 起 , 以 他 的 工 元 打赌 那天 的 观察 值 将 是 
0。 如果 他 赢 了 (从 而 他 有 2 元 )， 就 以 2 元 打赌 下 一 个 结果 是 2。 如 果 这 次 赢 
了 (从 而 他 有 12 元 )， 就 以 全 部 12 元 打赌 下 一 个 结果 是 0。 因此 每 个 赌 徒 如 
在 三 次 打赌 中 输 掉 任何 一 次 , 将 输 1 元 , 但 三 次 都 赢 了 将 赢 23 元 。 每 天 一 开 
始 又 一 个 赌 徒 开始 赌 。 以 了 X; 记 第 = 天 结束 时 赌场 的 总 赢得 。 由 于 所 有 的 打 
赌 都 是 公平 的 ， 故 得 {XX,，n 宇 1} 是 款 ， 均 值 为 0。 以 六 记 直 到 序列 020 出 
现 的 时 间 。 现在 第 NN 天 结束 时 赌 徒 1,…, N 一 3 都 输 1 元 , 赌 徒 N 一 2 赢 了 
23 元 , 赌 徒 N 一 1 输 1 元, 赌 徒 入 启 1 元 (因为 第 N 天 的 观察 结果 是 0)。 所 
以 
XN 一 人 一 3 一 23 十 1 一 1 一 N 一 26 
又 由 于 ELXw j= 二 0( 容 易 验 证 定理 7.2.2 的 条 件 (iii))7 可 匈 

ELN J=26 

用 如 上 同样 的 方式 ， 我 们 能 计算 直到 任 一 给 定 的 花样 出 现 为 止 的 平均 时 间 。 
例如 掷 硬 币 直 到 HHTTHH (H 一 正面 , T 一 反面 ) 出 现 的 平均 时 间 是 pg 
+p “十 p“， 其 中 p=P{H}=1 一 gq。 

假设 现在 我 们 要 计算 一 个 给 定 的 花样 ( 璧 如 是 花样 A) 比 第 二 个 花样 ( 璧 
如 是 花样 B) 早出 现 的 概率 。 为 了 计算 这 概率 ， 先 来 考虑 在 一 个 给 定 的 花样 
出 现 之 后 直到 另 一 个 花样 出 现 的 附加 时 间 是 有 益 的 .例如 在 上 面 的 例子 中 设 
4 二 0, 2，0,，B 二 1，0,，0,，2， 考 虑 和 Nas，B 之 后 4 出 现 所 需 的 附加 试验 次 
数 。 也 就 是 

Nals 一 min{&:0,2,0 是 1,0,0,2, XXX 的 连通 子 集 》 
为 计算 ELNa1g], 再 设想 每 一 天 一 个 赌 徒 开始 打赌 子 序列 4=0，2, 0, 在 接 
下 去 的 三 个 观察 结果 中 出 现 。 现 在 给 定 最 初 四 个 结果 是 1,， 0，0，2， 故 得 赔 
徒 1 与 2 都 输 掉 1 元 , 赌 徒 3 赢 了 11 元 (因为 他 赢 了 前 二 天 的 赌局 ), 赌 徒 4 
输 掉 1 元 。 现在 如 前 面 一 样 , 在 第 4 十 NAs 天 ,， 赠 场 将 赢 4 十 Nap 一 26 二 Nap 
一 22 元 。 由 于 赌场 的 赢得 构成 款 ， 在 前 四 天 的 赌博 中 输 掉 8 元 ， 故 得 
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ELNas— 22j= 二 一 8 
以 Na 记 为 了 得 到 4 所 需 的 试验 数 ， 我 们 证 明了 
ELN |=26, ELNas |=14 
(作为 一 种 核查 ,注意 到 由 于 A=0,2,0,B=1,0,0,2, 必须 有 


ELN 4a] 二 1 十 序 ELN4]。) 类 似 地 ,我 们 能 证 明 


ELNs|=72, ELNsla|=72 
为 了 计算 4 在 B 之 前 出 现 的 概率 Pa, 令 MM=min(Na,Ns), 则 
ELNs]=E[LM]+ELNa—M I] 
二 ELM] 十 ELNs 一 M1B 在 A 之 前 ](1 一 Pa) 
=E[M]+ (1— Pa)ELNAg] 
类 似 地 
ELNs|= ELM |]+PaELN sa] 


解 这 些 方程 得 
p ELNs]+ ELNas]— ELNa] 
4 ELN sa ELNas) 
ELNs]+ ELNas)]— ELNa) 


E[M]=ELNs|— ELNsa] EEN EEN 


在 我 们 所 考虑 的 特殊 情形 


P 72 十 14 一 26 _ 30 
4 14 十 72 43 


一 72 一 30072) 一 936 
EL[M]=72— 43(72)= 3 


例 7.2 (b) ”假设 我 们 要 计算 简单 随机 游 动 直到 击 中 i>0, 为 止 的 平 
均 时 间 ， 其 中 p> 地 。 为 此 以 N 记 这 段 时 间 。 由 于 


由 瓦尔 德 等 式 我 们 有 
ELN |](2p—1)=: 
或 


“人 
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7.3 回 到 随机 游 动 


设 
,= XxX,, 7- 之] 


:= 二} 

为 随机 游 动 。 我 们 的 第 一 个 结果 是 证 明 , 车 X; 是 只 取 有 限 个 整数 
值 的 随机 变量 ， 则 ELXj]=0 时 (5S;} 是 常 返 的 。 

定理 7.3.] 假设 XXX 只 取 值 0， 土 1，…, 士 M，M<co， 则 
(5s，7 之 0) 是 常 返 马尔 可 夫 链 当 且 仪 当 ELXj]=0。 

证 明 E[X] 了 0 时 随机 游 动 显然 是 非常 返 的 ,因为 它 或 收 伍 于 十 co 
(车 E[Xj]>0) ,或 收 化 于 一 oo 《车 ELX]<0)。 所 以 设 [Xj 一 0, 并 注意 到 这 
蕴含 了 (S,,n 宇 1}) 是 款 。 

以 4 记 以 一 MM 到 一 1 的 状态 集合 , 即 4= {一 放 , 一 CM 一 1),…, 一 1}。 假 
设 过 程 从 状态 i 开始 ,i 宇 9。 对 这 局 以 A; 记 状 态 集合 4;== {J,j 十 1,… ,J 十 
M} ,以 N 记过 程 首 次 进入 4 或 4 的 时 刻 。 由 定理 7. 2. 2， 

ELSnj= ELSoj=1 

所 以 

i=ELSv|SvE AJP{SNE A}+E[Sy|SNE A;JP{SyE A,} 

之 MP{SvE A}+TIi(—P{(SvE A)) 
或 


> 
PlSn€ A 之 jy 


- 3 * 了 一 
已 ;过程 迟 早 进 入 4A} 之 PlSn€ 4 之 j 寺 于 


P{ 过 程 迟 时 进入 A| 从 i 出 发 }=1]， i 宇 0 
现在 令 B= 二 {1,2,…,M}。 用 同样 的 论证 我 们 能 证 明 对 : 委 0 
PP 过 程 迟 早 进 入 BI| 从 i 出发} 二 l]， i 志 0 
所 以 ,对 一 切 i 
P{ 过 程 迟早 进入 AUB| 从 i 出发}=1 
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容易 看 出 上 式 欧 含 了 将 无 穷 多 次 到 达 有 限 状态 集 4UB。 然 而 ,如 果 过 程 是 
非常 返 的 ,那么 有 限 的 状态 集合 只 能 到 达 有 限 多 次 。 所 以 过 程 是 常 返 的 。 
骨 设 
5, = > X,, 1- 之 1 
= 


为 随机 游 动 , 并 设 pk 一 ELXJj 关 0。 对 给 定 的 4,B>0, 我 们 将 要 计算 
Pa,S; 在 到 达 小 于 或 等 于 一 B 的 值 之 前 达到 一 个 大 于 或 等 于 4 的 
值 的 概率 。 先 设 9 隆 0 使 得 
Ele** ] 一 1 
我 们 将 假设 这 样 的 9 存在 (通常 是 唯一 的 )。 由 于 
7 .=e 
是 独立 的 均值 为 1 的 随机 变量 的 乘积 , 故 得 {Z.} 是 均值 为 1 的 蒜 ， 
定义 停 时 N 为 
N 二 min{n:S, 宇 4A 或 5S, 志 一 B} 
由 于 能 够 证 明定 理 7. 2. 2 的 条 件 (iii? 被 满足 ,我 们 有 
Ele®x | 一 ] 
所 以 
(7. 3.1) 1=ELe®s|Sy>AlPs+ Ele®s|Sy—BI(—P) 
利用 等 式 (7. 3. 1) 能 得 到 Pa 的 近似 值 如 下 。 如 果 我 们 忽略 过 头 的 
数量 (越过 4 或 一 B 的 部 分 ) ,我 们 有 下 列 近似 式 : 
五 [ee |Sv 宕 A je 经 
Ele®s |Sv<—BlAe 
从 而 ,由 (7. 3. 1) 得 
le Ps +e 全 (1 一 已 ，) 
或 9B 


] 一 e 
(7. 3. 2) a4 一 -三 | 


我 们 也 能 利用 瓦尔 德 等 式 , 然 后 忽略 过 头 的 数量 得 ELN] 的 
近似 式 , 即 
ELSx|= ELSy|lSy 之 AJPa+ ELSy |SA< —Bl(l1—P,/) 
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利用 近似 式 
ElSv|S»v 宇 A | 之 A 


天 LSNlSNw 魏 一 已 | 盖 一 局 


我 们 有 
ELS» jeAPa—B(l— Pa) 
又 由 于 
ELSx |=ELN I]ELX | 
可 见 


ETX] 


利用 Pa 的 近似 式 (7. 3. 2) 得 
A(l—e )—B(es—1) 


(7. 3. 3) ELN J~ AB EY 
例 7. 3(a) 赌 徒 输 光 问 题 。 设 
wl! 以 概率 p 


”| 一]， 以 概率 一 1 一 p 

我 们 把 证 明 EL(q/p)*] 一 1 留 作 习题 ,所 以 一 gq/p。 若 假设 4 与 B 是 整数 ， 
那么 就 不 会 有 越过 头 的 部 份 ,因此 近似 式 (7. 3. 2) 与 (7. 3. 3) 成 为 精确 式 。 所 
以 


Pim=— 1-(9/p) 9] 一 1 
4 (gqg/p)*— (gq/p)-8 (g/ pIs+B— 1 

与 
By A 
EFN1—A0—(9/p)-®)—B(g/p)—1) 


((p/q)*— (p/q) 5)(2p—1) 
现在 假设 FLXj<=0, 我 们 对 随机 游 动 退 早 越过 4” 的 概率 感 
兴趣 .我 们 要 利用 迄今 所 得 结果 并 令 B-~ce 来 计算 这 个 概率 。 等 式 
(7. 3. 1) 说 
(7. 3.4) 1 二 ELe™x|Sw 之 4]P{ 过 程 越过 4 在 越过 一 B 之 前 ) 
十 ELe*w 1Sw 志 一 B]P{ 过 程 越过 一 B 在 越过 4 之前} 


* 越过 A 意味 着 或 击 中 A 或 超过 人 A。 
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0 天 0 定义 为 使 玖 Le ] 王 1 成立。 由 于 五 LX 过 0, 能 够 证 明 0 盖 0( 见 
习题 13)。 从 而 由 (7. 3. 4) 我 们 有 

1 之 e “局 过程 越过 4 在 越过 一 B 之 前 } 
令 B->co 即 得 


(7. 3.5) P{ 随 机 游 动 迟 早 越过 A} 亿 e “ 


7.4 ”应 用 于 G/G/1 排队 系统 与 破产 问题 


7.4.1 G/G/1 排队 系统 

对 于 G/G/1 排队 系统 ,一 个 顾客 在 排队 中 的 等 待 时 间 的 极限 
分 布 由 (7.1.5) 给 出 
(7. 4.1) P{Dw 宇 4) 王 P{ 对 某 个 nn,S, 宇 A) 
其 中 

5, = SU UV,=Y,— X,,, 

Y; 是 第 : 个 顾客 的 服务 时 间 ,Xi 是 第 : 个 与 第 :十 1 个 来 到 i 之 加 
的 间 卫 时 间 。 

因此 , 当 ELUJ] 二 ELYjJ 一 ELXj]<0 时, 令 9 二 0 使 得 

Ele® |]=E[e’”Y-*]=—1 

由 (7. 3. 5) 有 
(7. 4. 2) P{D, 宇 A}<e 

车 在 一 种 情形 , 那 时 我 们 能 得 到 D-, 的 精确 分 布 ,这 就 是 服务 
时 间 分 布 是 指数 分 布 的 情形 。 

所 以 假设 Y; 是 参数 为 4 的 指数 变量 。 我 们 记得 入 定义 为 S， 
越过 4 或 一 B 所 花 的 时 间 , 在 等 式 (7. 3.4) 中 证 明了 
《7.4.3) ”1==ELe*w|Sw 宇 AJP{S, 越过 4 在 越过 一 B 之 前 } 

十 五 Le w |S» 夺 一 BJP15S, 越过 一 已 在 越过 4 之 前 ) 


归 在 ,S, 一 了)(Y, 一 Xn) ,考虑 Sw 在 给 定 Sv 之 A 时 的 条 件 分 布 ， 
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这 殊 是 
~N N 

(7.4.4) 了》 (7, 一 X41) 在 给 定 》) (CY; 一 Xii1) 之 4A 时 
i 二 1 ;一 1] 


的 条 件 分 布 。 
对 的 值 ( 例 如 六 一 刀 及 


XY (Y;— X41) 
的 值 ( 璧 如 它 等 于 c) 取 条 件 时 ,注意 到 (7. 4.4) 给 出 的 条 件 分 布 正 
是 
Y, 一 c ， 在 给 定 冀 一 c>4 时 
的 条 件 分 布 。 由 指数 变量 的 无 记忆 性 可 得 ,7 在 给 定 Y>cT 十 4 时 
的 条 件 分 布 恰 是 c 十 4 加 上 一 个 参数 为 4 的 指数 变量 的 分 布 。 因 
此 ,Y, 一 c 在 给 定 站 一 c>>4 时 的 条 件 分 布 恰 是 4 加 上 一 个 参数 为 
的 指数 变量 的 分 布 。 由 于 这 对 一 切 n 及 c 成立, 可见 
ELe®n|S» 之 A] = Ele””+™] 
一 ccouereasy 


a 4 


= 


从 而 ,由 (7. 4. 3) 


1 一 ge*P{S, 越过 4 在 越过 一 B 之 前 ) 
十 ELe*»|Sw<< 一 BJP{S, 越过 一 B 在 越过 4 之 前 ) 
由 此 9 汪 0, 令 B 一 co 得 


1 一 pc"PtS， 迟早 越过 4) 


故 由 (7.4. 1) 


P{D->> 4 一 全 ee 4>0 


综 上 所 述 ,我 们 证 明了 下 列 
定理 7.4.1 对 具有 id 服务 时 间 站 ,i 之 1 ,及 iid 来 到 间隔 时 
间 XX , 关 。，,… 的 G/G/1 排队 系统 ,ELY <<ELXJ 时 ， 
。 279 + 


P{D, 之 A}<e “ 
其 中 90>0 使 得 

Ele” IlE[e “1=1 
此 外 , 若 Y; 是 参数 为 y 的 指数 分 布 , 则 


L004, A>0 
A 


P{D, 之 A}= 


0 
P D,=0 -一 一 一 
‘ } a 


这 时 的 9 使 得 
0X AL—0 
ElLe j= 个 
7. 4.2 一 个 破产 问题 
假设 一 家 保险 公司 收 到 的 赔偿 要 求 遵 循 一 个 更 新 过 程 ,其 来 
到 间隔 时 间 为 XX; ,XX,…。 假设 相继 的 要 求 赔偿 数 是 iid, 且 独立 于 
它们 发 生 的 更 新 过 程 。 以 Y; 记 第 i 个 要 求 赔偿 数 。 因此 若 以 N (2) 
记 到 z 为 止 要 求 赔 偿 的 次 数 , 则 保险 公司 到 : 为 止 的 赔偿 总 数 是 


4Y。 另 一 方面 ,假设 公司 以 每 单位 时 间 为 c 的 常数 速率 收 到 保 
险 费 ,<>0。 我 们 感 兴趣 的 是 确定 保险 公司 从 初始 资本 4 开始 最 
终 破 产 的 概率 。 也 就 是 要 求 

p= 二 PP( 对 某 个 二 0， Yi>ettA) 


显然 , 若 ELY] 之 cELXj, 以 概率 1 公司 最 终 要 破产 (为 什么 ?)。 所 
以 我 们 将 假定 
ELY J<cELX)] 
如 果 公司 破产 ,那么 这 事件 将 发 生 在 有 赔偿 要 求 发 生 的 时 刻 ， 
这 一 点 也 是 相当 显然 的 (因为 只 有 在 赔偿 要 求 发 生 的 时 刻 公 司 的 
资产 才 减 少 )。 在 第 ”次 要 求 发 生 之 前 的 时 刻 ,公司 的 财产 为 


4+cyIX Vy, 
乞 ”各 


因此 我 们 想 要 求 的 概率 , 记 为 A(4) ,是 
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p(4) 一 已 { 对 某 个 ns Atc DX 2Y:<0) 
或 等 价 地 
P(A4) 一 P( 对 某 个 nS, 二 A) 
其 中 
S,= YY,—eX,) 
是 随机 游 动 。 由 (7.4.1) 可 见 
(7. 4. 5) pA)=P{D,>A) 
其 中 Ds 是 一 个 来 到 间隔 时 间 为 cX;, 服务 时 间 为 Y; 的 G/G/1 排 
队 系 统 的 在 排队 中 的 极限 等 竺 时间 。 因 此 从 定理 7.4.1 我 们 有 下 
列 
定理 7.4.2 (保险 公司 迟早 破产 的 概率 , 记 为 pC4) ,满足 
pp(4)<e 人 
其 中 9 使 得 
Ele’ i X) |]==1 
(iib 奉 要求 赔偿 数 服从 参数 为 x 的 指数 分 布 , 则 


其 中 20 使 得 


(1) 帮 赔偿 要 求 来 到 的 过 程 是 参数 为 4 的 泊 松 过 程 , 则 
£0)=AE[Y J/c 

证 明 〈i) 及 (ii 直接 来 自 定理 7. 4.1。 在 (iii) 中 ,cX 是 参数 为 Vc 的 指 
数 变量 ,从 而 由 C7.4. 5)p(0) 等 于 MM/G/11 排队 系统 中 顾客 在 排队 中 的 极限 
等 待 时 间 为 正 的 概率 。 但 这 正 是 在 M/GV1 排队 系统 中 一 个 来 到 的 顾客 发 现 
系统 不 空 的 概率 。 因 为 它 是 一 个 有 泊 松 来 到 的 系统 ,一 个 来 客 所 看 到 的 状态 
的 极限 分 布 等 同 于 在 时 刻 上 的 系统 状态 的 极限 分 布 。( 这 是 因为 由 于 泊 松 来 
到 的 假定 ,在 一 个 顾客 于 时 刻 上 来 到 的 条 件 下 ,时 刻 上 的 系统 状态 的 分 布 等 同 
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于 时 刻 上 的 状态 的 无 条 件 分 布 .? 因 此 一 个 来 客 发 现 系统 不 空 的 (极限 ?概率 
等 于 系统 不 空 的 极限 概率 ,正如 我 们 用 多 种 不 同 的 方法 证 明 的 , 它 等 于 来 到 
速率 乘 上 平均 服务 时 间 ( 见 第 四 章 的 例 4. 3(a))。 


7.5 ”直线 上 的 布莱克 威 尔 定 理 


设 {5,,n 实 1) 为 随机 游 动 ,0 二 yy 一 EL[Xj] 过 2 。 以 UC) 记 使 5S， 

< 的 的 个 数 。 也 就 是 
2 1， 若 9 委 : 
DC) 一 2 其 中 过 0 其它 

奋 X,;, 是 韭 负 的 , 则 如 (2) 正 是 NGC), 到 :为止 的 更 新 数 。 

令 u(?) 三 ELU(z)]。 本 节 我 们 将 证 明 一 个 类 似 于 布莱克 威 尔 
定理 的 结果 。 

布莱克 威 尔 定理 若 x 二 0,X; 不 是 格 点 的 , 则 对 4a 放 0,t 一 oo 
时 

u(t a) — ult) 一 > a/ 

在 给 出 上 述 定 理 的 证 明之 前 ,介绍 上 升 及 下 降 阶 梯 变 量 的 概 

念 是 有 用 的 。 若 
S,max(So,S1,… ,5,_1)， 其 中 = 三 0 
我 们 说 在 时 刻 = 发 生 一 个 阶梯 高 度 为 S， 的 上 升 阶梯 变量 。 也 就 是 
每 当 随机 变量 达到 一 个 新 的 高 度 时 发 生 一 个 上 升 阶 梯 变 量 。 例 如 ， 
随机 游 动 首 次 为 正 的 时 刻 发 生 第 一 个 上 升 阶梯 变量 。 如 果 在 时 刻 
n 发 生 一 个 高 度 为 S; 的 阶梯 变量 ,那么 下 一 个 阶梯 变量 将 在 第 一 
个 使 
D2; 六。 
的 时 刻 2 十 7 发 生 , 或 等 价 地 在 第 一 个 使 
X. 十 … 十 >0 
的 时 刻 n 十 7 发 生 。 由 于 诸 X; 是 独立 同 分 布 的 ,因此 随机 游 动 在 阶 
柳 变 量 间 的 变化 彼此 都 是 概率 意义 上 的 复制 品 。 也 就 是 , 若 以 NN， 
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记 第 :一 1 个 与 第 i 个 阶梯 变量 之 间 的 时 间 , 则 随机 向 量 CN', Sw 一 
Sx_,)(i 宇 1) 是 独立 同 分 布 的 (其 中 Swo 志 0)。 

类 似 地 我 们 能 定义 下 降 阶 梯 变 量 的 概念 , 当 随 机 游 动 达 到 一 
个 新 的 低 度 时 就 说 它们 发 生 。 以 pC(p,) 记 人 述 星 得 到 一 个 上 升 C 下 
降 ) 阶 梯 变 量 的 概率 。 也 就 是 

PP 二 了 1 对 某 个 ,5S, 守 0} 
P, 二 PI 对 某 个 ,5 二 0) 

每 当 得 到 一 个 上 升 (下 降 ) 阶 梯 变 量 之 后 ,就 又 以 同样 的 概率 
P(p:) 再 得 到 男 一 个 。 因 此 和 恰 有 个 这 样 的 上 升 ( 下 降 ) 阶 梯 变 量 
(n 宇 0) 的 概率 为 户 (1 一 p)(p" (1 一 p,))。 所 以 上 升 ( 下 降 ) 阶 梯 变 
量 的 个 数 为 有 限 且 均值 有 限 当 且 仅 当 p(p,) 小 于 1, 由 于 E_X]> 
0, 由 强大 数 定律 可 得 ,以 概率 1,n 习 co 时 5, 一 0; 所 以 ,以 概率 1 
有 无 穷 多 个 上 升 阶梯 变量 ,但 只 有 有 限 个 下 降 阶 梯 变 量 。 因 此 ,p 
一 1] 及 p, 二 1。 

现在 我 们 已 准备 好 去 证 明 布 莱克 威 尔 定理 .证 明 分 几 步 走 。 先 
论证 t>00 时 lt 二 a) 一 u(t) 趋 于 一 个 极限 。 然 后 证 明 这 个 极限 值 
等 于 一 个 常数 乘 以 a; 最 后 证 明基 本 更 新 定理 的 一 个 推广 ,使 我 们 
能 把 这 个 常数 等 同 于 1/y。 

布莱克 威 尔 定理 的 证 明 相继 的 上 升 阶梯 高 度 构成 一 个 更 新 过 程 。 
以 Y(#) 记 这 个 更 新 过 程 在 时 刻 ; 的 剩余 寿命 。 也 就 是 ,*+Y() 是 随机 游 动 第 
一 个 超过 上 的 值 。 现 在 易 见 ,给 定 YG) 的 值 , 辟 如 Y(GD)=y 时 ULG+a) 一 CT) 
的 分 布 不 依赖 于 1。 也 就 是 ,如 果 我 们 知道 随机 过 程 第 一 个 超过 :的 点 发 生 于 
过 1 距离 y 处 , 则 C(t 十 a) 中 点 的 个 数 与 已 知 第 一 个 正 值 是 y 时 (0,4) 中 点 的 


个 数 同 分 布 。 因 此 ,对 某 个 函数 g， 
E[UCG + a) — UIYG)] = g(Y 0)) 


取 期 望 故 得 
ult +a) — ult) 一 无 LgCYCD)] 
Y (2) ,作为 一 个 非 格 点 更 新 过 程 在 t 时 的 剩余 寿命 ,收敛 于 一 个 极限 分 布 ( 即 
来 到 间隔 分 布 的 平衡 分 布 )。 因此 ,EL[g CY(2))] 将 收 伍 于 ELg(Y (Coo))], 其 中 
Y(ce) 服 从 Y(e) 的 极限 分 布 ,从 而 我 们 证 明了 
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lim[z(t 十 a) — w(t)] 
的 存在 性 。 现 在 令 
hla) = lim[ult + a) — u(t)] 
则 有 
ha+ 6 limfuG +ad+6)— ult+6) 二 ub) — u(t)] 
=lim[ultt6+a) —uGt6) +lim[u(t6) —u(t)] 


一 户 (C) 十 六 CD) 
这 殖 含 了 ,对 某 个 营 数 < 
(7. 5.1) hla)=lim[u(tta)—u(t) |=ca 


为 辨认 <c 的 值 ,以 N, 记 使 S, 之 i 的 第 一 个 x 车 X; 是 有 界 的 , 璧 如 谨 以 
M 为 界 , 则 
t < 一 Sx, 三 tt 二 MM 
取 期 望 并 利用 瓦尔 德 等 式 ( 使 用 类 似 于 命题 7.1.1 中 用 的 论证 方法 可 得 
ELN, jj] 过 0) 得 
t < ELN, jt+M 
所 以 ioo 时 
(7. 5.2) 
大 X; 不 是 有 界 的 , 则 我 们 能 用 截 尾 证 法 (正如 在 证 基本 更 新 定理 时 所 用 的 那 
样 ) 证 明 (7. 5. 2) 成 立 。 现 在 UC) 能 表示 为 
(7. 5.3) U2)=N—1+Nr 
其 中 Ns 是 走 过 i 之 后 S, 落 和 [一品 ,tj 的 次 数 . 由 于 随机 变量 Nr 不 大 于 时 
刻 N, 之 后 使 随机 游 动 小 于 Sw 的 点 的 个 数 , 故 得 


(7. 5. 4) ELNY ] 志 EKE[ 使 S$, 过 0 的 的 个 数 ] 

现在 我 们 将 论证 上 式 的 右边 是 有 限 的 , 故 由 (7. 5.2) 及 《7. 5. 3) 得 上 一 co 时 
ult) 1 

(7. 5.5) 一 一 — x 


《7. 5.4) 的 右边 为 有 限 的 论证 如 下 :由 命题 7.1.1 注意 到 , 当 六 是 第 一 个 使 

S>0 的 z 的 值 时 匹 LNJ<co。 在 时 刻 N 以 一 个 正 概率 1 一 p" 随机 游 动 的 将 

来 的 值 永 不 低 于 Sw。 若 一 个 将 来 的 值 确实 低 于 Sw; 那 么 再 用 类 似 于 命题 

7. 1. 1 中 用 过 的 证 法 可 知 ,直到 随机 游 动 重新 变 为 正 为 止 的 平均 附加 时 间 是 
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有 限 的 , 那 时 又 以 正 概 率 1 一 p "将 来 的 值 永 不 低 于 现在 的 正 值 ,等 等 ,我们 能 
以 此 作为 证 明 

E[ 使 S$, 二 0 的 的 个 数 ] 去 
的 基础 。 这 就 说 明了 (7. 5. 5) 。 


现在 将 利用 (7. 5. 1) 及 (7. 5.5) 完 成 证 明 。 从 (7. 5. 1) 我 们 有 :一 ce 时 
KE 十 一 2 一 上 


EN 0 


这 理 含 ”一 cc 时 
>; xi 十 1) 一 zxG) 


天 


或 等 价 地 
un 十 1) 一 zw(1) 


由 (7. 5.5) 这 蕴含 了 c= 二 1/x。 定 理 证 毕 。 

注 记 ”上述 证 明 有 一 处 不 严格 , 即 尽管 了 (2) 的 分 布 收敛 于 
Y(oo) 的 分 布 ,不 一 定 能 得 出 Eleg CY (2))j 的 收敛 于 ELg(Y 
Coo))]。 我 们 应 该 直接 证 明 其 收敛 性 。 


一 可 人 


7.6 骨 论 软 
对 一 切 2,E[12,|] 二 的 随机 过 程 (12,4 之 1} 称 为 下 款 , 若 
(7. 6. 1) E[Z,1112Z1, ,2, 22 
称 为 上 黄 , 若 
(7. 6. 2) ElZ2,) 1 2 9 ,Z, |Z, 


因此 一 个 下 拷 是 一 种 上 偏 的 赌博 ,一 个 上 款 是 下 偏 的 赌博 。 
从 (7. 6.1) 可 见 , 对 下 款 

天 1LZ 之 五 L2 
对 上 裔 这 不 等 式 反 向 。 类 似 于 定理 7. 2. 2 的 结论 对 下 款 与 上 扶 仍 
然 成 立 。 特 别 , 若 V 是 (2Z,,n 宇 1} 的 停 时 ,使 得 定理 7.2.2 中 的 充 
分 条 件 有 一 个 被 满足 , 则 对 下 轿 

El[Zn | 之 有 2 
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对 上 扶 这 不 等 式 反 辕 。 
最 重要 的 款 定 理 是 收敛 定理 。 在 讨论 这 个 结果 之 前 我 们 需要 
一 些 准备 知识 。 首 先 回忆 下 列 凸 阴 数 的 定义 。 
定义 ” 实 轴 上 的 函数 了 称 为 凸 的 , 若 对 一 切 zz 0<A 
1， 
f Att (1 NT) ESA) + (1 — VF,) 
我 们 将 需要 下 面 的 引 理 。 
引 理 7. 6. 1 延 条 不 等 式 
和 若 了 是 凸 范 数 , 则 
ELf(X)] > f (ELXY) 
假定 期 望都 存在 。 
引 理 7. 6.2 马尔 可 夫 不 等 式 
若 了 是 非 负 随机 变量 , 则 对 一 切 4a 二 0 
P{Y 之 a} ELY |/a 
引 理 7. 6. 1 与 7. 6.2 的 证 明和 留 作 习题 。 
引 理 7. 6.3 
若 {2Zi,i 之 1) 是 下 款 ,N 是 停 时 使 得 P(N<n} 二 1, 则 
ELZ1) < ELZw|] < ELZ,)] 
证 明 由 于 有 界 ,以 类 似 于 定理 7.2.2 的 结论 可 知 E[Zwn] 之 


ELZ1]。 现 在 有 
E[Z,]Z1,.° ZwysN = k] = E[Z,|Z,,. ,ZsN 一 后 
=ELZ,|Z1,.… DZ] (为 什么 ?) 


二 2. 
一 ZN 
对 上 式 取 期 望 即 得 结论 。 
引 理 7. 6. 4 
大 (Zn 之 1) 是 抽 ,f 是 凸 函 数 , 则 {f(2Z,),n 之 1) 是 下 款 。 
证 明 


ELf (Zi+1)121,% ,2 > ACELZ | 21 2, 1) (由 延 征 不 等 式 ) 
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= f(Z,) 
定理 7. 6.5( 下 载 的 柯 尔 莫 哥 洛 夫 不 等 式 ) ”者 {2Z,,n 之 11 是 


Plmax(Z1,"*…,Z,) > a} < ElZ, 


a 


L_ 


证 明 以 NN 记 使 二 mZ>a 的 最 小 的 五 若 对 一 切 上 1 ,a,2i<&a， 
定义 它 等 于 n。 注 意 到 max(Z:,…,Z,)>a 等 价 于 Zw>a。 所 以 
P{max(Z1,.°* ,2,) >a}=P{IZw>ai 
人 ELZwj/al 由 马尔 可 夫 不 等 式 ) 
ELZ, J/a 
其 中 最 后 的 不 等 式 得 自 引 理 7. 6. 3, 因 为 N<n。 
系 7.6.6 
设 {2Z,,n 宇 1) 是 靳 , 则 对 a 二 0 
G) P{max(C|Z1| ,|Z,|)>a} ELIZ,|]/a 
(ii) P{max(|Z1|,*…, |2,|)>a}<EL|Z?|]/e 
证 明 Gi) 及 (Gi) 得 自 引 理 7.6.4 与 柯 尔 莫 哥 洛 夫 不 等 式 ,因为 函数 
f(z)=|zx| 与 f(z)=x? 都 是 凸 的 。 
现在 我 们 正 为 著 收 敛 定 理 作 好 准备 。 
定理 7.6.7( 拷 收敛 定理 ) 设 (2.,m 之 1} 为 款 , 使 得 对 某 个 
M< 一 co 


有 L12. 委 M 
则 以 概率 1,limZ, 存在 且 有 限 。 

证 明 我们 将 在 较 强 的 假设 :EL2:] 有 界 之 下 证 明定 理 ( 较 强 是 因为 
EL|Z, | 所 (E[2Z2]) 事 )。 因为 f(z)==x? 是 凸 的 ,由 引 理 7. 6.4 得 出 。{2Z?,n 实 
1) 是 下 款 ; 从 而 ELZij 是 非 碱 的 . 由 于 ELZij 有 界 , 故 nn 一 oo 时 它 收 人 印 。 令 /二 
oc 为 极限 : 

k= limELZ2:| 
我 们 通过 证 明 {2; ,x 之 1}) 以 概率 1 古 柯 西 序列 而 证 得 lim 2， 存在 且 有 限 , 也 就 
是 将 证 明 以 概率 1,k&.m 一 2 时 
[Zt ZZ, | — 0 
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现在 

(7. 6. 3) 忆 {1|Z 一 ZE 对 基 个 有 和 2)} 
< 大 FLCZ 一 ZJ]e 由 柯 尔 莫 哥 洛 夫 不 等 式 ) 
一 王 LZ2 一 2Z DZ 十 Z2]/e2 


但 是 
五 LZ QZ] 一 ELELZ,Zn+n |Z | 

= E[Z,ELZ,4,|Z, 

= ELZ22] 
从 而 由 (7. 6. 3) 

“2 2 
P(1Zss 一 Z| > 61 对 蘑 个 hn) 之 全 人 tL 
令 mco ,回忆 Ap 的 定义 得 
P{|Zits 一 Z|! 之 6; 对 某 个 有 } 声 2 

所 诬 ,mm—> Co 时 


P11Z。rs 一 Z| > 对 某 个 对 一 0 
从 而 ,以 概率 1,Z, 是 柯 西 序列 , 故 limZ, 存在 且 有 限 。 

系 7.6.8 

车 {Z,,n 之 0) 是 非 负 回 , 则 以 概率 1,limZ, 存在 且 有 限 。 


证 明 由 于 2 非 负 
E[L|Z,|] = ELZ,|] = ELZ.|] 


例 7. 6(a) 分 支 过 程 。 若 X, 是 分 支 过 程 中 第 代 的 个 体 总 量 , 每 个 个 
体 的 平均 后 代数 为 x,; 则 2 二,/m" 是 非 负 款 。 从 而 由 系 7. 6. 8,n 一 oo 时 它 


将 收 合 由 此 我 们 能 得 出 结论 :或 XX, 一 0, 或 它 以 指数 速率 趋 于 。 
例 7.6(b) 一 个 关于 周 博 的 结果 。 考 虑 一 个 赌 徒 参加 公平 的 赌博 , 即 若 


Zr' 是 赌 徒 在 x 局 之 后 的 赌 金 , 则 4Z,nr 之 1} 是 园 。 现 在 假设 不 给 内 钱 , 所 以 赌 


徒 的 赌 金 不 允许 变 成 负数 ,并 设 每 一 局 至 少 赢 或 输 1 元 。 以 
六 一 minta: 一 和 1)} 


记 直 到 赌 徒 被 强迫 退出 为 止 已 玩 的 赌局 数 。( 因 为 Z, 一 Z,+1 一 0, 他 没有 赔 第 


n 十 1 局 ,) 由 于 {12} 是 非 负 园 , 由 收 合 定 理 可 见 
《7. 6. 4) lim2Z， 以 概率 1 存在 且 有 限 。 
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但 对 nn 达 入 ,12Zrti 一 Zr| 之 1; 所 以 (7. 6. 4) 草 含 了 ,以 概率 ] 
N<o% 
也 就 是 ,以 概率 1 赌 徒 最 终 要 输 光 。 
我 们 将 以 利用 蒜 收 敛 定 理 证 明 强 大 数 定律 结束 本 章 。 
定理 7.6.9( 强 大 数 定 律 ) 设 Xi,X… 独 立 同 分 布 , 均 值 w 


有 限 ,S; 二 > X;, 则 
i=1 
P{lmS,/n = 4} = 1 


证 明 我们 将 在 矩 母 旺 数 岁 () 二 ELe*] 存 在 的 假设 下 证 明定 理 。 


对 给 定 的 e 汪 0, 定 义 g(2) 为 
g(t) 一 etpfe /人 人) 


由 于 
gz (0) = es > 


存在 一 个 值 m>0 使 得 g (46) 二 1。 现 在 我 们 证 明 S,/n 只 能 有 限 多 次 与 x 十 e 
一 样 大 。 注 意 到 
Er0n 


(7.6.5) 。 守 >p+ > |)" ， 
. 60. 二 * E ~ > 一 (gtto)) 


然而 ,ee 到 (to) 是 独立 的 均值 为 1 的 随机 变量 (第 i 个 变量 是 eo*i/ 交 (1)) 的 
乘积 ,故而 是 款 。 由 于 它 也 是 非 负 数 ,收敛 定理 证 明了 , 以 概率 1 

Jimeo /到 (zto) 存在 且 有 限 。 
由 于 g(t0) 之 1, 由 (C7.6.5) 得 出 


P{ 对 无 穷 多 个 m 衬 > wz 十 时 一 0 
类 似 地 ,定义 水 数 0) 一 ec 2/ 严 ( ,注意 到 (0)==1, 扩 (0)= 一 e, 存 在 一 
个 值 ma<0 使 Ato)>>1, 以 同样 的 方式 我 们 能 证 明 

P{ 对 无 穷 多 个 ,守之 x 一 6 一 0 


因此 
Dn 


nn 


P{ 对 一 切 n, 除 了 有 限 个 ,x 一 上 委 
由 于 上 式 对 一 切 se 盖 0 成 立 , 故 


和 /十 引 一 1 
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习 赴 
1. 考虑 下 述 水 流 进 与 流出 水 库 的 模型 .假设 在 第 ”天 ,y 单位 的 水 量 从 外 界 


水 源 , 如 降雨 与 河流 ,流入 水 库 . 在 每 一 天 结束 时 按 下 述 规则 放水 :如 果 库 
内 水 量 大 于 <, 放 掉 水 量 “, 和 吉它 小 于 或 等 于 <, 则 放 掉 全 部 水 量 . 水 库 的 容 
量 为 C, 且 一 旦 达到 容量 ,多 余 的 要 流 进 水 库 的 水 假设 全 部 流失 .。 例如 ,在 
第 ”天 开始 时 水 量 为 zx, 则 在 这 天 结束 时 (放水 之 前 ) 水 量 是 min (x 十 y,， 
C)。 以 5, 记 第 nn 天 结束 时 放水 之 后 的 水 库 水 量 。 假设 y,n 之 1) 独 立 同 分 
布 ,证 明 : 15,,n 宇 1) 是 一 个 随机 游 动 ,在 0 及 C 一 a 处 有 有 反射 壁 。 


- 对 简单 随机 游 动 计算 到 达 状 态 的 平均 次 数 。 
* 设 六 | ;人 2 可 交换 。 计算 ELX, 1Xn;XXw ,Xj ,其 中 XK) 


全 人 了 wy 是 XX 的 顺序 统计 量 。 


. 若 XiX… 是 可 交换 随机 变量 的 无 穷 序 列 ,ELXi < 证明 Cov (Xi， 


Xz) 之 0。 《提示 :注意 Var( 2 Xi)。) 当 可 交换 随机 变量 集合 有 限时 给 出 一 
个 反例 。 


。 对 款 {Z,m 之 1) , 今 Xi 一 2 一 Zi 其 中 Lo 三 0。 证 明 : 


Var(Z,) = > Var(X,) 
ti 一 ] 


. 验证 : 当 X, 是 一 个 分 支 过 程 的 第 x 代 的 总 量 ,每 个 个 体 的 平均 后 代数 是 


nt 时 9 | } 是 对， 


. 对 简单 随机 游 动 ,p 关 万 ,论证 (9/p)%(n 之 1) 是 扶 。 
-车 


S,— DX n> 1 
=1 


是 随机 游 动 ,ELX; |]==0 及 Var(X;) 二 a, 证 明 : 2 一 Si 一 no? 时 ， (Zn 站 
1) 是 拷 。 


“ 设 Y 为 均值 有 限 的 随机 变量 ,Wi,W;,… 为 随机 向 量 。 证 明 : 2, = 二 


ELY Wi,… Wj] 时, {2Z,,n 之 1}) 是 拷 , 考 虑 一 个 人 玩 一 种 他 最 终 要 赢 或 输 
* 286 。 


10. 


11. 
12. 


13. 


14. 


TIS. 


16. 


17. 


的 赌博 。 以 P, 记 已 知 前 ”局 赌博 的 结果 时 他 最 终 要 赢 的 条 件 概率 。 论 证 
P, 是 鞭 。 
连续 地 掷 一 校 硬币 ,正面 出 现 的 概率 为 二 。 求 直到 下 列 花 样 出 现 为 止 的 平 
均 投 掷 次 数 : 
(a) HHTTHH 
(b) HTHTT ”《H 一 正面 ,T 一 反面 ) 
现在 假设 硬币 是 均匀 的 , 即 p 一 方 ;以 A 及 B 记 花样 A4=HTHT 及 B= 
THTT。 求 ELNsaj4,ELNgj] 及 P(A4 在 B 之 前 出 现 }。 
论证 X; 只 取 值 0, 十 1,… ,十 放 , 有 是 ELXi] 一 0 的 随机 游 动 是 零 常 返 的 。 
以 Stn 宇 0) 记 一 个 随机 游 动 , 且 
/一 五 LS 一 9 天 0 
对 4>>0,B>>0 令 
NN 一 mmin:S, 之 A 或 5, 三 一 B) 
证 明 :ELN]<oo。( 提 示 :论证 存在 一 个 & 使 得 P{S,>4 十 刀 } 盖 0。 然 后 
证 明 ELN]<kELGJ, 其 中 G 是 一 个 适当 定义 的 几何 分 布 随机 变量 .》 
利用 延 狐 不 等 式 (f 为 瑟 函 数 时 ,EL fA(X) 之 ACEL[Xj)]) ,证明 :车 0 关 0， 
ELX]<0,ELe*]=1, 则 0>0。 
在 ?7.4 节 中 的 保险 破产 问题 中 解释 为 什么 车 E[Y] 宇 cE[X], 公 司 以 概率 
1 最 终 破 产 。 a 
在 7.4 节 中 以 屎 记 赔 偿 要 求 来 到 间隔 的 分 布 ,以 G 记 赔 偿 数 的 分 布 。 证 
明 : 从 资产 4 开始 的 公司 迟早 破产 的 概率 pCA) 满 足 
p(A) = | [ga to ~ zdGCr) dF OH) 十 | cca + cadF tt) 
对 一 个 x 二 ELX]>0 的 随机 游 动 ,论证 以 概率 1, 上 ~co 时 
u(t) 1 
t 大 
其 中 z (5 等 于 使 0/ 委 9 过: 的 的 个 数 。 
设 5, 一 之 XX: 为 一 个 随机 游 动 , 以 和 ,i>0, 记 一 个 阶梯 高 度 等 于 i 的 概率 ， 


即 丸 =P{S, 的 第 一 个 正 值 等 于 站 
(la) 证 明 : 知 


18. 


19. 
20. 
21. 


22. 
23. 


24. 


则 慷 满 足 
A= a qh AA), i>0 


Cb) 车 P{Xi=j 一 三 ,j 一 一 2, 一 1,0,1,2, 证 明 : 


_l+V5 ,2 
3+M5. +Vs 
设 S.(z 之 0) 为 随机 游 动 ,其 中 和 有 分 布 以 G(t,s) 记 第 一 个 超过 :的 
5 的 值 小 于 或 等 于 :十 : 的 概率 , 即 
Glt,s) 二 P{ 第 一 个 超过 1 的 和 二 1 十 5} 


证 明 : 
Ga = PFC 十 习 一 Fa) 十 | Ga 一 ypDdFCy) 


证 明 延 釉 不 等 式 。 

证 明 马 尔 可 夫 不 等 式 。 

一 个 负 子 最 初 装 有 一 个 白 球 及 一 个 黑 球 。 每 次 从 中 取出 一 球 , 放 回 时 再 
放 进 一 个 同样 颜色 的 球 ， 以 2. 记 第 4 次 放 回 之 后 色 中 白 球 的 比例 。 

(a) 证 明 :(2Z,,n 宇 1} 是 拷 ，。 


Cb》 证 明 : 镀 中 白 球 的 比例 大 到 子 的 概率 至 多 为 己 ，。 


若是 递增 凸 隐 数 ,12Z.,% 宇 0} 是 下 对 ,证 明 ; 4f(2Z,) ,nn 之 0} 也 是 下 寺 。 
设 民 |,,X 相互 独立 ,有 ELX| 一 A Var(XN) 一 中 之 1。 证 明 : 


nlm | | >)< 避 和 
这 称 为 柯 尔 莫 哥 洛 夫 不 等 式 。 
考虑 一 系列 独立 地 机 郑 硬币, 以 已 { 正 面 } 记 每 次 投掷 中 出 现 正面 的 概 
率 。 以 4 记 假 设 己 { 正 面 }=a 以 B 记 人 根 设 P 己 (正面 })=5,0<a,p<<1 .以 和 
记 第 : 次 投掷 的 绪 果 , 仿 
2, 一 一 


证 明 : 者 假设 8 为 真 , 则 
(a) (2 是 蒜 ; 

(b) 以 概率 1,lim2Z。 存 在; 
(c) 和 若 2 关 alim2Z, 是 什么 ? 


PlX1,",X.|A)} 
P(X “天 | 如) 
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25. 设 Z,,n 写 1, 是 一 列 随机 变量 ,使 得 Z; 圭 1, 且 对 nn 这 1, 给 定 Z1,"…,Z,-1 时 
Z, 是 以 Z。, 为 均值 的 泊 松 变量 。* 大 时 关于 Z, 我 们 能 说 些 什么 ? 
26. 设 Xi ,X: ,为 独立 随机 变量 ,使 得 
P{X;=—1}=1— 1/2 
P{Xi=2—1})=1/2,， i 之 1 
利用 此 序列 构造 一 个 零 均值 鞠 Z,, 使 得 以 概率 1 ,im Z,= 一 oo。( 提 示 : 
利用 波 莱 尔 一 坎 秦 利 引 理 。) 
27. 连续 时 间 过 程 {XQ),t 宇 0} 称 为 堵 , 若 对 一 切 二 i， 
E[XCG)|IX(u) ,0RuRs] = X(s) 
(a) 若 {Z()} 是 漂移 系数 为 x 的 布朗 运动 ;证明 :XG)= 二 ZC2) 一 ty 时 ,4X 
(2)} 是 靳 。 
(b》 若 {N (4)} 是 强度 函数 为 a(z) 的 非 齐 次 泊 松 过 程 ,证 明 :X() 二 NG) 
一 | spa 时 ,{X() 是 园 。 假设 连续 时 间 情 形 时 与 定理 7. 2. 2 类 似 
的 结果 成 立 ,所 需 的 正则 性 条 件 满足 ,证 明 : 
(c) 对 具有 漂移 kw,p0 的 布朗 运动 ,从 0 到 z 的 平均 时 间 是 xz/y,x 之 0; 
(d) w==E[| "als)4ds], 其 中 7, 是 一 个 具有 强度 函数 a(s) 的 非 齐 次 泊 松 过 


程 击 中 >” 的 时 刻 。 
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8 
随机 友 关 系 


引 


nit 


本 章 介绍 一 些 随机 变量 之 间 的 随机 序 关 系 。 在 8. 1 节 中 ， 我 
们 考虑 一 个 随机 变量 随机 大 于 另 一 个 随机 变量 的 概念 ， 给 出 了 它 
对 具有 单调 失效 率 函 数 的 随机 变量 的 应 用 。 在 8. 2 节 中 ， 我 们 继 
续 研 究 随机 大 于 的 概念 ， 介 绍 了 耦合 方法 ， 并 前 明 它 的 用 处 。 特 
别 ， 在 8. 2. 1 节 中 我 们 用 耦合 方法 建立 了 生 灭 过 程 的 一 些 随 机 单 
调 性 质 ， 在 8. 2. 2 节 证 明了 : 有 恨 状 态 遍 历 马尔 可 夫 链 的 二 步 转 
移 概率 以 指数 速度 收敛 于 它 的 极限 概率 。 

在 8.3 节 中 ， 我 们 考虑 随机 变量 间 的 失效 率 序 ， 它 强 于 随机 
大 于 序 。 我 们 表明 了 如 何 利 用 这 个 思想 去 比较 某 些 计数 过 程 ， 事 
实 上 我 们 利用 它 证 明了 更 新 理论 中 来 到 间隔 分 布 连续 时 的 布 菜 克 
威 尔 定理 。 也 给 出 了 来 到 间隔 分 布 有 递减 失效 率 的 更 新 过 程 的 一 
些 单调 性 质 。 在 8. 4 节 ， 我 们 考虑 似 然 比 序 。 

在 8.5 节 ， 我 们 考虑 一 个 随机 变量 比 另 一 个 随机 变量 更 多 变 
的 概念 ， 且 在 8.6 节 中 ， 将 它 用 于 比较 (i) 排 队 系 统 (8. 6.1 节 )， 
(ii) 一 个 更 新 过 程 和 一 个 泊 松 过 程 (8. 6. 2 节 ), Gi) 分 支 过 程 。 
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8.1 随机 大 于 


我 们 说 随机 变量 X 随机 地 大 于 随机 变量 YY， 如 果 对 一 切 a 
(8. 1.1) PIX>a} 之 PlY>a) 
记 作 X 之 Y。 如 果 关 和 Y 分别 服从 分 布 f 和 GG, 那么 (8.1.1) 等 价 
于 对 一 切 a 

F(a) 之 G(a) 

引 理 8.1.1 

如 果 Xay， 则 ELX] 宇 ELY] 

证 明 ” 先 设 X,Y 是非 负 随机 变量 ， 那 么 

ELX] = | P(x > ajda 之 | Py > a}da = E[Y] 


一 般 地 ， 我 们 可 以 把 任 一 随机 变量 Z 写成 二 个 非 负 随机 变量 之 差 如 下 ; 


Z=2*+— 2- 
其 中 
Z+ (> 奋 4 全 0 _ | 0， 阁 Z 之 0 
”lo， 若 Z 二 0 “一 2Z,， 若 Z 二 0 
现在 我 们 把 证 明 
XY => Xt>Y+, X-<Y- 


st 


留 作 练习 。 由 此 得 ， 
五 [和 一 五 [X+ J—ELX- Jj>ELY+ J— ELY™ J]=E[LY] 
下 列 命 题 给 出 了 随机 大 于 的 另 一 个 定义 。 
命题 8. 1. 2 
XX 之 Y 咏 对 一 切 递 增 滑 数 f，ELf(X)j] 之 ELf(Y)] 
证 明 ” 先 设 X 之 Y, /是 一 个 递增 函数 。 我 们 证 明 /(X) 之 /(Y) 如 下 。 
令 i'(a)=in{f{zx;f(z)>>a}, 则 
P{f(X)>a}= P{X> f°-1(0)} PIY > 广 :Ca)) 
— P{f/(Y) > a} 
从 而 ,A(X) 宇 1(Y)。 所 以 由 引 理 8.1.1 得 EL[f(X)] 宇 ELf(Y)]。 
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现在 设 对 一 切 递增 函数 太 有 巨 [LFX)] 盖 EL .对 任 一 a, 以 六 记 递 
增 前 数 : 


和 苦 工 六 a 
/ol7) = 0， 车工 么 < 
那么 
ELf.(X)]=P(X>a}, ELf,.(Y) =PiIY>a)} 
由 此 可 见 之 Y。 


例 8- 1(a) 递增 和 递减 失效 率 . 设 X 为 一 个 具有 分 布 函数 玉 和 密度 函 
数 7 的 非 负 随机 变量 。 我 们 记得 X 的 失效 率 函 数 定 义 为 
hCG) = f (0) /FG) 
我 们 说 X 是 一 个 递增 失效 率 (IFR) 和 随机 变量 ,如 果 
A(t) 人 不: (关于 t 递增 》 
我 们 说 X 是 一 个 递减 失效 率 (DFR) 随 机 变量 ,如 果 
A(t) yt 《关于 上 递减) 
如 果 我 们 把 XX 当 作 某 种 元 件 的 寿命 ,那么 因为 4(i) dt 表示 历时 上 的 元 
件 在 区 间 (,i++dz) 内 失效 的 概率 ,所 以 可 看 出 ,XX 是 IFR (DFR ) 意 味 着 在 一 
小 段 时 间 di 内, 越 是 老 的 元 件 越 容易 ( 越 不 容易 ) 失 效 。 
现在 设 这 种 元 件 到 时 刻 : 没有 坏 , 以 X, 记 从 :开始 元 件 的 剩余 寿命 。X， 


的 分 布 无 为 
(8. 1. 2) F(a)=P{X,>a} 
— PIX—t>al|X>) 
=F(t+a) /Fu) 
命题 8.1. 3 


么 是 IFR 马 X, 关 于 i 随机 递减 
X 是 DFR 所 X, 关于 zt 随机 递增 
证 明 ”能 够 证 明 XX, 的 失效 率 函 数 , 记 作 ,为 
(8. 1. 3) 4 al) 一 4C 十 C) 
其 中 4 是 X 的 失效 率 函 数 。 利 用 (8. 1. 2)? 能 正式 地 证 明 等 式 (8. 1. 3) ,或 者 能 
较 直 观 地 作 如 下 论证 : 
Ca)= limP {a 二 Xa 十 hIX, 宇 a}/h 
一 limP {a < X —t<athlX>t,X—t>a!l/h 


"293 。 


= 1imP 人 十 < 区 < 十 芭 十 天 | 之 上 十 CA 
h->0 


二 A(t 十 a) 
因为 
《8. 1.4) F,() =exp{—| 4ca)da) 


一 exbp | -| xd | 

所 以 ,如 果 XAy) 是 递增 (递减 ) 的 ,那么 F(s) 关 于 1 是 递减 (递增 ) 的 . 类 似 地 ， 
如 果 Ff.(s) 关 于 t 是 递减 (递增 ?的 ,那么 (8.1. 4) 殉 含 了 4(7) 关 于 > 是 递增 
(递减 ?的 。 

于 是 一 种 元 件 的 寿命 是 IFR(DEFR ) ,如 果 这 种 元 件 越 老 ,其 剩余 寿命 越 
是 随机 地 小 (大 )、 

一 类 常见 的 DFR 分 布 是 指数 分 布 的 混合 。 我 们 说 分 布下 是 
分 布 RF.(0 二 a 二 oo) 的 一 个 混合 ,如 果 对 某 分 布 G 


FOr) = | FC)dGCe) 


当 我 们 从 一 个 由 不 同 的 类 型 组 成 的 总 体 中 取样 时 ,就 出 现 混 
合 。 一 个 特征 为 < 的 类 型 的 元 件 的 值 服从 分 布 ,。G 是 特征 量 的 
分 布 。 

现在 考虑 两 个 具有 失效 率 和 4s 的 指数 分 布 的 混合 ,其 中 义 
过 心 。 为 证 明 这 混合 分 布 是 DFR ,注意 到 如 果 选 出 的 元 件 到 时 刻 : 
没有 坏 ,那么 它 的 剩余 寿命 的 分 布 仍 是 两 个 指数 分 布 的 混合 .这 是 
因为 当 它 是 1- 型 元 件 时 , 它 的 剩余 寿命 仍 服从 失效 率 为 A 的 指数 
分 布 ,或 者 当 它 是 2- 型 元 件 时 , 它 的 剩余 寿命 仍 服从 失效 率 为 3 
的 指数 分 布 。 不 过 ,元 件 为 1- 型 的 概率 不 再 是 ( 先 验 ) 概 率 户 , 而 是 
在 到 时 刻 上 没 坏 的 条 件 下 的 条 件 概 率 。 事实 上 , 它 是 一 个 1- 型 元 件 
的 概率 为 


PT- 型 | 寿命 > 小 一 个 启 守 全 字 开 


i pe "1 
pe + (1 — pe 
因为 上 式 关 于 t 是 递增 的 ,所 以 上 越 大 ,所 用 的 元 件 越 可 能 是 1- 型 
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的 ( 较 好 的 一 种 ,因为 厂 矢 4?)。 因 此 , 越 是 老 的 元 件 越 少 可 能 失效 ， 
于 是 指数 分 布 的 混合 是 DFR 。 

DFR 分 布 函 数 类 在 混合 下 原来 是 封闭 的 (这 蕴含 有 上 面 的 事 
实 , 因 为 指数 分 布 有 常数 失效 率 , 所 以 既是 IFR 又 是 DFR)。 为 证 
明 这 事实 ,我 们 需要 下 列 著名 的 引 理 ,其 证 明 留 作 练 习 。 

引 理 8. 1.4 柯 西 一 许 瓦 兹 不 等 式 

对 任意 分 布 G 和 国 数 Ai) ,k(t) ,t 宇 0, 有 


[ace dG < WGZAGY [eacco| 


假定 这 些 积 分 存在 。 

现在 我 们 可 以 叙述 下 列 

命题 8. 1.5 

如 果 对 一 切 0 和 xc<ceo ,Ff。 是 DFR 分 布 ,G 是 一 个 (0,ce) 上 的 
分 布防 数 ,那么 下 是 DFR ,其 中 


FQ) | Peaceo 
D 
证 明 
4 ps) | fwWadGc) 
DT FG FG 
我 们 先 设 所 有 的 导数 存在 ,然后 证 明 (d /dn)45《) 声 0, 这 就 证 明 X45 G4) 关 
于 上 是 递减 的 。 今 有 
FC) |f.WdG(a) 十 (fa 
F(t) 

因为 FG) 二 |F,Ce)4GCe) ,所 以 由 上 式 可 见 ,为 证 (4/di)ArG4)<<0, 只 需 证 明 
C8. 1. 5) 


ad 
Fr Lr Ct) 一 


(Peaceoj <{ fr.cwadGce)) [| 一 Peace 


令 Ao) 一 (Cet))2 ,Co 一 (一 六 (t))172, 再 利用 柯 西 一 许 瓦 兹 不 等 式 ,我 们 
得 到 
(| FF) AG) Ye 本 eacco| PaGda) 
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因此 ,为 了 证 明 (8.1. 5) 只 需 证 明 
(8. 1. 6) 


2 _ 2 
(facce)) <[ [CF.wWf .0 vac) 
由 假设 fs。 是 DFR ,于 是 


0 A feD FWP + RW) 


a 
dat F(t) F2(t) 


这 蕴含 了 
— FQ)Ff 0) 2 fC) 


这 就 证 明了 (8.1.6), 由 此 结论 成 立 。C( 上 式 也 证 明了 户 .() 志 0, 因 此 可 以 定 
义 &(o) 二 (一 f°.(t)) 2,) 


8.2 耦合 


如 果 X>>Y, 那 么 存在 与 X 和 Y 同 分 布 的 随机 变量 X* 和 
Y ,使 得 六 "以 概率 1 大 于 等 于 Y*。 在 证 明 这 个 结论 前 我 们 需要 
下 列 引 理 。 

引 理 8. 2.1 

设 F 和 G 是 连续 的 分 布 函数 ,如 果 X 服从 分 布下 ,那么 随机 
变量 C CRGX7)) 服 从 分 布 C。 


证 明 
PIGT (F(X) a}= PIF(X) < Gla))} 
= PIX Fi(G(a))) 
= F(FTI(G(a))) 
= G(a) 
命题 8. 2.2 


如 果 分 布 函 数 F 和 G 满足 到 Co) 三 CCa) ,那么 存在 随机 变量 
和 和 了 ,分 别 有 分 布 尺 和 C, 且 使 
己 { 和 YY) 一 1 
证 明 我 们 给 出 F 和 G 是 连续 的 分 布 函数 时 的 证 明 。 设 X 服从 分 布 
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政 , 定义 Y= 二 G1(F(X))。 那么 由 引 理 8.2.1 知 ,Z 服从 分 布 G. 但 是 由 于 天 天 
G, 故 有 让! 之 G71!, 所 以 
Y= GF(X)) SF I(F(X)=X 

结论 得 证 。 

证 明了 了 宇 G 的 最 简便 的 方法 常常 是 设 X 是 一 个 具有 分 布 F 
的 随机 变量 ,然后 用 XX 去 定义 一 个 随机 变量 了 ,使 得 (DY 服从 分 
布 G, iDysX。 我 们 用 一 些 例 子 来 说 明 这 种 方法 , 它 以 耦合 著称 . 

例 8.2(Ca) 向 量 的 随机 序 。 设 XX!,…,X, 相互 独立 ,7 了, … ,7。 相互 独 
立 。 如 果 X, 之 Yi, 屠 么 对 任意 递增 函数 /有 

f(X1,.% ,KX,) 之 J (Yi ,YY,) 


证 明 设 X;,…,X, 相互 独立 ,然后 利用 命题 8. 2.2 产生 相互 独立 的 
Ze 其 中 7 服从 Y; 的 分 布 , 目 Y? 志 X;。 由 于 /是 递增 的 ,所 以 
7X XK,) 宇 fCY?Y ,… ,了 ; )。 因 此 对 任意 的 a 有 

f Yr ,oo Yi ) > a>f(X ,KX,) > a 
所 以 
已 (AT YY) > a} SP{f(X ,NX,) > a) 
因为 上 式 左 边 等 于 P{fCOY1,…,Y,) 之 4), 所 以 结论 成 立 。 

例 8.2(b) ” 泊 松 随机 变量 的 随机 序 。 我 们 证 明 泊 松 随机 变量 关于 它 的 
均值 随机 递增 。 以 N 记 一 个 均值 为 4 的 泊 松 随机 变量 。 对 任意 p,0<<p 二 1， 
令 降 ,T;，,… 相 互 独立 ,与 NN 独立 , 且 使 得 
/1， 以 概率 zp 
”lo， 以 概率 1 一 


那么 
> 是 均值 为 办 的 泊 松 随机 变量 (为 什么 ?) 
因为 站 
DN 
故 结论 得 证 。 加 


我 们 将 利用 命题 8. 1. 2 先 对 向 量 , 然 后 对 随机 过 程 给 出 随机 
大 于 的 定义 。 
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定义 ”我 们 说 随机 向 量 生 =(X ,和 。) 随机 大 于 随机 癌 量 
二 (Yi1,… ,Ya), 记 为 X 之 Y ,如果 对 一 切 递 增 函数 /有 
E[Lf(X)1 > ELf(Y)] 
我 们 说 随机 过 程 (XX(2),t 宇 0} 随 机 大 于 {Y (2),t 宇 0) ,如果 对 一 切 
12 zl19 yt, 


(A (iD) 9 入 ( 志 )) 之 人 7 (二 ) 9 ,Y (1,)) 


由 例 8. 2(a) 得 出 ,如 果 蒜 和 7 是 独立 分 量 组 成 的 向 量 , 且 满 足 
XY, ,那么 X 之 Y. 作 为 练习 ,请 读者 给 出 一 个 去 掉 独 立 性 假设 时 
的 反例 。 

在 证 明 一 个 随机 过 程 随机 大 于 另 一 个 时 ,耦合 又 一 次 经 常 成 
为 关键 。 

例 8.2(Cc) 比较 更 新 过 程 , 设 入 ;= {Ni;(1),1 宇 0) ,i 二 1,2, 为 更 新 过 程 ， 
分 别 具 有 来 到 间 隐 分 布 F 和 GG。 如 果 F 宇 G, 则 

{N11(2),t 守 0} {N00), 之 0} 

为 证 明 以 上 结论 ,我 们 利用 耦合 如 下 .。 设 X1, 关 ;,… ,独立 , 且 分 布 为 F。 
那么 由 X; 产生 的 更 新 过 程 ( 记 为 N? ) 与 Ni 有 相同 的 概率 分 布 。 现 在 产生 独 
立 随机 变量 了 ,Ys,… ,其 分 布 为 G, 有 是 满足 Y; 志 X,。 那 么 由 来 到 间隔 时 间 Y， 
产生 的 更 新 过 程 ( 记 为 wz ) 与 N,: 有 相同 的 概率 分 布 .然而 ,因为 对 一 切 i, 有 
Y, 夺 X;, 所 以 推 得 对 一 切 t 

NI (1) < Ny (1) 
这 就 证 明了 结论 。 

8. 2.1 生 灭 过 程 的 随机 单调 性 

设 人 (tt 之 0 是 一 个 生 灭 过 程 .我 们 将 证 明 {(X (0)} 的 
两 个 随机 单调 性 .第 一 个 是 生 灭 过 程 随 初始 状态 XX(0) 增 加 而 随机 
递增 ， 

命题 8. 2. 3 

CO st0) 关 于 和 (0) 熏 机 递增 , 即 对 一 切 忆 ,二 和 递增 
函数 太 克 LACXG)，…X())|XC0) 一 让 关于 ;递增 。 

证 明 设 {Xi1(2),t 守 0} 和 {X(t),t 宇 0) 是 独立 的 生 灭 过 程 ,具有 相同 
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的 出 生 率 与 死亡 率 , 且 设 X(0) = 十 1,X 00) 一 :因为 XI (CO0)>X3(0) ,这 两 
个 过 程 始 终 或 增长 1 或 下 降 1, 且 它们 决 不 在 同一 时 刻 发 生 增 减 ( 因 为 这 种 可 
能 性 的 概率 为 零 ), 所 以 要 么 过 程 Xi (GD) 一直 大 于 过 程 了 ,G4) ,要 么 在 某 一 时 
刻 二 者 相等 。 以 工 记 它 们 首次 相等 的 时 刻 , 即 

co ， 车 对 一 切 i,X1(t) > X,(1) 

inf {t:Xi(t) = X(t)}， 其 它 
若 7<co, 则 这 两 个 过 程 在 时 刻 了 相等 ,因此 ,由 马尔 可 夫 性 知 ,它们 在 时 刻 
TT 以 后 的 延续 部 分 具有 相同 的 概率 结构 。 于 是 ,如 果 我 们 定义 第 三 个 随机 过 
程 , 记 作 {XG(2)}) ,为 


Xi， 当 上 < 了 
Xt)， 当 t 宇 TT 
那么 {X32)} 也 是 一 个 生 灭 过 程 ,与 其 它 两 个 过 程 有 相同 的 参数 ,而 且 X:(0) 
一 XIi(0) 一 :十 1。 然 而 ,因为 由 7 的 定义 
Ai) Do 对 上 < 了 


As (Ci)》 一 | 


可 见 对 一 切 : 
Aastt) 之 XX, (1) 

这 就 证 明了 结论 。 

第 二 个 随机 单调 性 质 说 ;车 初始 状态 是 0, 那么 在 时 刻 t 的 状 
态 关 于 上 随机 递增 。 

命题 8. 2. 4 

对 一 切 j,P{X() 宇 j|X(0) 二 0} 关 于 i 递增 。 

证 明 对 s<i， 

P (X01X(0)=0) 


= PPIX x0) 0,X(t—s)—iP(X(—s)=i|X(0)=0) 
-> (XD)>j|XG 一 让 二 ijPw( 一 s) (由 可 尔 可 夫 性 ) 
P{X(s)7IX(0) =i} P, (tC—s) 
P{X(s) 宇 j|X(0)=0}Po(t 一 s) (由 命题 8. 2. 3) 
=P{X()ZIIX(O) =0) Pad- 

二 
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— PIX(s) 守 7|X(0)=0} 


注 记 命题 8. 2. 4 除了 提供 了 生 灭 过 程 的 转移 概率 的 一 个 漂 
亮 的 定性 性 质 外 ,在 应 用 中 也 是 有 用 的 ,尽管 对 固定 的 ,要 用 显 
式 确定 Po(2) 的 值 常常 是 困难 的 ,但 是 获得 极限 概率 P; 是 件 简单 
的 事情 .现在 由 命题 8. 2. 4 我 们 有 


P{X() >j1X(0) = 0) SlimP{X() > j1X(00) = 0) 一 >)P， 


这 说 明 XQ() 随 机 小 于 服从 极限 分 布 的 随机 变量 , 记 为 XCco), 从 
而 提供 了 XX(2) 的 分 布 的 界 。 

8.2.2 马尔 可 夫 链 的 指数 收 人 生性 

考虑 一 个 有 限 状 态 不 可 约 马尔 可 夫 链 ， 转 移 概率 为 P;;, 我 们 
将 用 耦合 方法 证 明 当 ”>ce 时 ，Pz 以 指数 速度 收敛 到 一 个 与 无 
关 的 极限 ,为 证 这 一 点 , 我 们 要 利用 下 述 结 论 : 如 果 一 个 遍历 马尔 
可 夫 链 具有 有 限 个 状态 一 一 譬如 说 M 个 状态 , 则 必定 存在 N ,se> 
0， 使 得 对 一 切 i，; 
(8. 2. 1) Pi>e 

现在 考虑 此 马尔 可 夫 链 的 两 个 独立 的 拷贝 , 譬如 是 {X,, ?> 之 
0}》 和 {XX,，n 宇 0;， 其 中 一 个 从 i 出 发 ， 蔷 如 已 (Xo=i)》 一 1， 另 
一 个 满足 已 (1 一 中 = 二 zj, j 二 1, 2,，…, M, 其 中 zx 是 平稳 分 布 ， 
即 它们 是 方程 


的 非 负 解 。 
以 了 记 两 个 过 程 首 次 处 于 同一 状态 的 时 刻 ， 即 
T = ‘min(n;X, = KX,) 
现在 
T>mN>Xy Xn, Kon A Kon ss RN A KN 
* 3600。 


所 以 
(8. 2. 2) 
P{T>mN}<P(ADP( (AI AD P(A, | Al… A,.1) 
其 中 4; 为 事件 Xn; 隆 Xn。 由 (8.2.1) 得 ,不 管 现在 的 状态 如 何 ， 
在 过 了 时 间 入 的 将 来 时 刻 处 于 状态 7 的 概率 至 少 为 <:， 因 此 不 管 
过 去 如 何 , 这 两 个 链 在 过 了 时 间 和 的 将 来 时 刻 都 处 于 状态 7 的 概 
率 至 少 为 ee ， 从 而 处 于 同一 状态 的 概率 至 少 是 Me? .因此 〈8. 2. 2) 
右边 所 有 的 条 件 概率 不 大 于 1 一 Me .于 是 有 
(8. 2. 3) P ‘IT>mN}; 委培 一 Me 一 (1l—a)” 
其 中 a 二 Me?。 
现在 我 们 定义 第 三 个 马尔 可 夫 链 ， 记 为 {X,, n 宇 0}, 它 等 于 
X 直到 了 为止， 之 后 等 于 和 ， 即 
叉 X,， 对 nn 夺 卫 
X,， 对 n 宇 T 
因为 X, 二 Xr， 所 以 显然 { 叉 ,，n 宇 0} 是 一 个 转移 概率 为 PP; 的 马 
尔 可 夫 链 ， 且 依照 平稳 分 布 选取 初始 状态 。 今 
已 { 且 ,一 四 一 已 (X 一 1 中 T 委 PT P(X,=/7| TOn}P{IT>n) 
=P{X,=j|T<n}P{T<n}+P{X,=),T>n) 
类 似 地 有 
Pr=P{X,= ]) 
=P{X,=j|T<n}P{IT<n}++P{X,= 7,T >n) 
从 而 
Ps — P(X,=7))=P{X,= TT>n}— P(X,=j,T>n)} 
这 更 含 了 
IP; — P(X,= 7)| PIT>n) 
委 (1 一 oa (由 (8.2.3)) 
但 容易 验证 ( 壁 如 对 用 归纳 法 ) 
PiX,. = j= 
* 30] 。 


于 是 可 见 
jo Nt 其 中 B= 一 91 


2 ]—a’ 
因此 忆 ; 确 实 以 指数 速度 收敛 到 与 i 无 关 的 极限 . (以 上 也 附 
带 证 明了 不 存在 多 于 一 个 的 平稳 分 布 .) 
注 记 ”在 8. 3 节 中 ,我 们 将 用 类 似 于 上 述 定理 中 给 出 的 论证 方 
法 去 证 明 更 新 过 程 来 到 间隔 分 布 连续 时 的 布莱克 威 尔 定理 。 


8. 3 失效 率 序 及 其 对 计数 过 程 的 应 用 


随机 变量 入 有 一 个 比 Y 大 的 失效 率 泪 数 , 如果 对 一 切 t 宇 0 
(8. 3. 1) Ax(t) 之 Ay(t) 
这 里 Ax(t) 入 (2) 分 别 是 人 和 Y 的 失效 率 隐 数 .(8. 3.1) 意 为 , 寿 
命 为 XX 的 元 件 比 寿命 为 Y 的 元 件 在 年 龄 相同 时 前 者 更 可 能 立即 
失效 ,事实 上 ， 因 为 : 


£ 二 5 
PIXStt+ sR Si = exp{— | ACyay) 


所 以 (8. 3.1) 等 价 于 
PiX>t+s|X>iPY>it+s|IY > 7) 
或 等 价 地 ， 对 一 切 :之 0 
义 ， SY, 

其 中 X, 和 YY, 分别 是 与 X 和 YY 同 分 布 的 元 件 经 历 t 时 间 后 的 剩余 
寿命 。 

失效 率 序 在 比较 计数 过 程 时 非常 有 用 。 为 了 说 明 这 一 点 ,让 我 
们 从 考虑 一 个 延迟 更 新 过 程 开 始 ， 这 个 更 新 过 程 的 首次 更 新 服从 
分 布 C, 而 其 它 的 来 到 间隔 服从 分 布 ,F 和 G 都 是 连续 的 , 且 有 
失效 率 图 数 太 ( 世 和 各 G) 。 今 ju() 满 足 

max(rmaxAr(3) :IaxAc(3) ) < p(t) 
我 们 先 表 明 如 何 由 取 自 强度 函数 为 x(1) 的 非 齐 次 泊 松 过 程 的 一 
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个 随机 样本 产生 这 个 延迟 更 新 过 程 。 
PA 5S1, 52， … 记 强度 函数 为 At 的 非 齐 次 泪 松 过 程 人 NG) -之 
0} 中 事件 发 生 的 时 刻 , 现 在 我 们 来 定义 一 个 计数 过 程 ,其 事件 只 可 
能 在 时 刻 S1，S;，… 发 生 ， 然 后 论证 这 个 计数 过 程 是 一 个 具有 初 
始 更 新 分 布 C 和 来 到 间隔 分 布 的 延迟 更 新 过 程 。 令 
1， 硅 这 个 计数 过 程 的 一 个 事件 在 时 刻 5; 发 生 


71. 一 
0， 其 它 
因此 , 为 了 确定 这 个 计数 过 程 ， 我 们 需要 规定 1;, ;之 1,， 的 联合 分 
布 .作法 如 下 : 
给 定 Si， S,, ” 取 
(8. 3. 2) 已 (五 二 1 一 MGSi /ALCSi) 
且 对 ;1， 
(8, 3. 3) P{1;=1|7 ,7 ,1,.))} 
Ac (CS,) T 
| pC) 右 和 一 一 一 人 一 0 
sy 若 7J 一 max{(&:R<<r ,六 一 1) 


为 了 对 上 述 定 义 有 点 感性 认识 ,以 A(:) 记 这 个 计数 过 程 在 时 刻 t 
的 年 龄 ;也 就 是 从 这 个 计数 过 程 在 i 以 前 发 生 的 最 后 一 个 事件 到 
的 这 段 时 间 。 那 么 A(S1)==51, 而 其 它 的 A(S;) 的 值 由 五 ，…， 1 
递 推 地 得 到 .例如 ， 如 果 荆 = 二 0， 则 AC5,) 二 S$ 和 ， 而 当 卫 二 1， 则 
A(52) 一 Ss 一 S1。 那 么 《8.3.2) 和 (8.3.3) 等 价 于 


0 ， 奇 4(49:) 一 人， 
PP 人 17 CALS)) 

F ; 

CS) 大 A4(5;)<=S; 


我 们 说 由 I, i 宇 1, 定义 的 这 个 计数 过 程 构 成 了 所 期 待 的 延迟 
时 新 过 程 .为 了 明 逐 这 一 点 ,注意 到 对 于 这 个 计数 过 程 在 已 知 任 一 
时 刻 t 过 去 的 情况 的 条 件 下 ， 在 时 刻 i 发生 一 个 事件 的 概率 强度 
为 
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PI{ 在 GL,t 十 h) 中 发 生 事 件 | 到 :为止 的 历史 ) 
二 P{ 非 齐 次 泊 松 过 程 的 一 个 事件 在 (t,t 十 h) 中 发 生 ， 
且 被 计数 | 到 z 为 止 的 历史 ) z 
二 (pC2)h 十 ob(h))P( 事 件 被 计数 ;到 zi 为 止 的 历史 ; 


[DA 二 oCD]2 — XC ht olh), 夺 A40)=t 


[Eprom ECD XA ho ， 若 AQ)<t 


因此 在 任 一 时 刻 : 发 生 。 个 事件 的 概率 (强度 ) 只 依赖 于 那个 时 刻 
的 年 龄 ， 且 年 龄 为 1 时 ， 它 等 于 如 (zt)， 否 则 等 于 《4 (GD )。 而 
这 样 的 计数 过 程 显然 是 一 个 延迟 更 新 过 程 ， 它 具有 来 到 间隔 分 布 
Ff 和 初始 更 新 分 布 C。 

现在 我 们 利用 这 个 延迟 更 新 过 程 可 表 为 一 个 非 齐 次 汽 松 过 程 
的 随机 取样 的 事实 ， 给 出 来 到 间隔 分 布 连续 时 的 布 菜 克 威 尔 定理 
的 一 个 简单 的 概率 证 明 。 

定理 〈 布 莱克 威 尔 定理 ) 。 设 {(N ” (z),，t 宇 0) 为 一 个 具有 连续 
来 到 间隔 分 布 F 的 更 新 过 程 ， 则 上 ~c=e 时 


ml(t + a)— m(t)— < 
A 


其 中 mm 一 五 LN G2) ]，p 是 来 到 间隔 的 平均 时 间 ， 假 设 为 有 限 。 

证 明 我 们 将 在 附加 的 简化 假设 下 证 明 布 莱克 威 尔 定理 , 假设 的 失 
效率 函数 入 (1) 有 界 且 大 于 一 个 正 数 ， 即 存在 0 二 二 如 二 co， 使 得 对 一 切 : 
(8. 3. 4) A 过 A 
又 令 G 是 一 个 分 布 ， 它 的 失效 率 函 数 也 在 丸和 之 间 。 

考虑 一 个 参数 为 的 泊 松 过 程 ， 它 的 事件 发 生 的 时 刻 记 为 S1，5S 
现在 设 左 ，I2 ，… 由 (8. 3. 3) 产生 ， 其 中 的 (t) 三 XN,, 设 了 i，1,，"*…， 由 
(8. 3. 3) 产生 ， 其 中 的 G=F 和 4 (4)) 三 入 ， 且 与 序列 谨 ，1? ，… 条 件 独 
立 (给 定 S1,， 5S;,，…)。 于 是 , 事件 在 使 17 =1 的 时 刻 S; 发 生 的 计数 过 程 ， 记 
为 {N。(z), t 宕 0}, 是 一 个 来 到 间隔 分 布 为 F 的 延迟 更 新 过 程 ; 而 事件 在 使 
1; 二 1 的 时 刻 5; 发 生 的 计数 过 程 , 记 为 {N (4), t 宇 0}, 是 一 个 来 到 间隔 分 布 
为 的 更 新 过 程 . 令 
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N=mint{i: T= 二 1])} 
即 V 是 第 一 个 同时 被 两 个 新 产生 的 过 程 计数 的 泊 松 过 程 的 事件 ,因为 每 个 
泊 松 事件 与 任何 其 它 事情 独立 地 ， 至 少 以 概率 如 被 一 个 指定 的 新 产生 的 
过 程 计 数 ， 所 以 得 


(人 一 天 1 > 
从 而 
PIN<o0}=1 
现在 定义 第 三 个 序列 1;，i 宇 1]， 为 
_ 了 对 ZN 
{i 对 i 宕 N 


于 是 ,事件 在 使 1; 二 1 的 时 刻 S; 发 生 的 计数 过 程 {NG), 1 宇 0} 是 一 个 具有 
初始 更 新 分 布 G 和 来 到 间隔 分 布 F 的 延迟 更 新 过 程 , 且 从 时 刻 Sw 开始 , 它 
的 事件 发 生 的 时 间 与 {NG) ,之 0} 的 相同 。 
令 NGvt 十 a) 二 NGTa) 一 NGQ), 对 术 也 类 似 地 定义 ,我 们 有 
EINCG,t+a) |}=E[NG ,+a)|Sny< IP{SySz) 
十 五 LN (tt 十 ua) lSvy>P {Sy>1) 
=ELNG ,t+ta)|lSy<tJP{Svy<t)} 
+ELN(G,t+a)|lSy>tP{Sv > 
=ELNCG,t+a)]+ (ELNG,t+a) |Swy>t] 
—E[N(CG,t+Ha)|Sy>tlP{Snx >t) 
现在 容易 推出 ELN(z,t 十 a)1Sw 之 11 志 Na, 以 及 用 太 代 兰 N 也 有 类 似 的 估 
计 式 .因为 N 二 吕 蕴 含 , 当 t 一 吕 时 ,P{Sw 之 tj}->0, 故 从 工 述 讨论 可 岗 1 一 oo 
时 
《8. 3. 5) ELN(i,2+a) |— ELN(G,t+a) |—>0 
如 果 我 们 取 G== Ff ,其 中 F,()=| F(y)dy/p, 容 易 证 实 ( 见 第 三 章 命题 3. 5. 2 
中 的 证 明 )G==F 时 ,ELN (2)]=t/p,; 因 此 ,由 (8. 3.5) 得 上 >co 时 
ELNG,t+a)l>a/p 
这 就 完成 了 证 明 。 
我 们 将 发 现 , 由 一 个 泊 松 过 程 的 随机 样本 产生 一 个 更 新 过 程 
的 方法 在 得 到 来 到 间隔 分 布 具有 递减 失效 率 的 更 新 过 程 的 某 些 单 
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调 性 结果 时 也 是 有 用 的 。 作 为 准备 ,我 们 再 定义 一 个 记号 。 

定义 ”对 一 计数 过 程 {N (2) ,t 宇 0} 和 任意 的 时 间 和 集合 了 T, 定义 
N(T) 为 在 T 中 发 生 的 事件 数 。 

我 们 从 一 个 引 理 开始 。 

引 理 8. 3. 1 

设 入 二 4N (1),t 之 0} 为 更 新 过 程 , 它 的 来 到 间隔 分 布 具 有 递 
减 失 效率 ,又 设 入 ,一 {N,(t),t 之 0) 为 延迟 更 新 过 程 , 它 的 第 一 个 
来 到 间隔 有 分 布 玉 ,, 其余 的 来 到 间隔 分 布 为 己 , 其 中 已 , 是 更 新 
过 程 N 在 时 刻 y 的 剩余 寿命 的 分 布 .( 这 意味 着 ,可 以 认为 N, 是 
一 个 与 NN 有 相同 来 到 间隔 分 布 的 更 新 过 程 从 y 开始 的 继续 。) 这 
时 对 任意 的 时 间 集 合 Ti ,… ,了 7T,, 有 

CN(TD) ,oe NOT NT ,N,(T,)) 


证 明 以 NM = 人 CN GW 之 y}) 记 一 个 与 N 独立 ,但 来 到 间隔 分 布 也 为 
F 的 更 新 过 程 在 y 之 前 的 那 一 段 .我 们 把 入, 看 成 是 NN “在 时 刻 y 以 后 的 继 
续 . 令 A'(y) 为 更 新 过 程 入 在 时 刻 y 的 年 龄 。 

考虑 一 个 参数 为 x 二 440) 的 泊 松 过 程 ,以 5S1,5;,… 记 其 事件 发 生 的 时 
刻 , 利 用 这 个 泊 松 过 程 产生 一 个 计数 过 程 , 记 为 N ,在 这 个 过 程 中 ,事件 只 可 
能 在 时 刻 Si:(i 之 1) 发 生 。 如 果 当 一 个 事件 在 5; 发 生 时 ,有 了 二 1, 否 则 I 二 0， 
那么 令 

P{L=11D, ,1 1)}=A(ACGS.)) /yp 

其 中 4(51) 二 Si, 而 对 1 这 1,40C5;) 是 从 5; 之 前 最 后 一 个 被 计数 的 事件 到 5， 
的 时 间 , 这 里 在 5; 发 生 的 当 松 事件 称 为 被 计数 的 , 如果 了 =1。 如 前 ,这 样 产 
生 的 计数 过 程 是 一 个 来 到 间隔 分 布 为 f 的 更 新 过 程 。 

现在 我 们 定义 另 一 个 计数 过 程 , 它 也 只 可 能 在 时 刻 Si,i 之 1, 发 生 事 件 ， 
而 以 I 指明 在 S; 事件 是 否 发 生 . 以 和 GO) 记 这 个 过 程 从 :上 之 前 的 最 后 一 个 事 
件 到 的 时 间 ,或 若 上 之 前 没有 事件 , 则 定义 人 (为 上 4 (y)。 令 开 使 得 

如 果 了 一 0, 则 元 =0， 

如 果 工 二 1, 则 了 二 1， 以 概率 24CACS;))/ACACS,)) 

0， 其 它 
因为 仅 当 7=1 时 ,1; 才 可 能 等 于 1, 所 以 我 们 始终 有 有 (2) 宇 4G(), 又 因为 4 不 
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增 , 所 以 404(0SD)) 委 41404080)) ,因此 以 上 定义 是 有 意义 的 。 由 此 可 见 
已 人 一 117 7 
一 已 人 太一 1 站 7 人 一 起 一] 
~—ACACS))/p 
且 知 由 了 ,i 之 1 ,产生 的 计数 过 程 , 记 为 NW, ,是 一 个 延迟 更 新 过 程 ( 因 为 4(0) 
一 4"(y), 其 初始 分 布 为 妃 ,。 因 为 WwW, 的 事件 只 能 在 入 的 事件 发 生 的 时 刻 上 
发 生 ( 对 一 切线 志 7) ,所 以 对 所 有 的 集 7 
N(T)>N, CT) 
引 理 得 证 。 
命题 8. 3.2 DFR 更 新 过 程 的 单调 性 
设 A() 和 YQG) 为 一 个 更 新 过 程 N= {NG),t 宇 0} 在 时 刻 i 的 
年 龄 和 剩余 寿命 ,其 来 到 间隔 分 布 是 DFR , 则 4(z) 和 Y(z) 都 关于 
t 随机 递增 ,也 即 对 一 切 a,P{A4()>a} 和 P{Y()>a} 都 关于 : 递 
增 。 
证 明 ”设想 我 们 需要 证 明 
PliAL+y)>a}2P{(ACG)>a} 
为 此 我 们 把 A(z) 当 作 引 理 8. 3. 1 中 的 更 新 过 程 N 在 时 刻 上 的 年 龄 ,把 4G 十 
>》) 当 作 更 新 过 程 N, 在 时 刻 上 的 年 龄 .然后 令 T==[t 一 a,t], 由 引 理 8. 3. 1 有 
P{N(T) 宇 1}>P{N,(T)>1) 
或 等 价 地 
PIA(DSEa}P{ACG+ y) Sa) 
对 于 剩余 寿命 的 证 明 除 了 令 工 =[, 十 dd], 其 余 都 是 类 似 的 ， 
命题 8. 3. 2 可 用 来 得 到 DFR 更 新 过 程 的 更 新 函数 和 DFR 随 
机 变量 的 分 布 的 一 些 良好 的 界 。 
系 8. 3. 3 
设 下 是 一 个 DFR 分 布 , 它 的 前 二 阶 和 矩 为 


A 一 TCF (xr), Ap 一 | zaFdz) 
中 如 果 mm.(2) 是 一 个 来 到 间隔 分 布 为 F 的 更 新 过 程 的 更 新 函 


数 , 则 
“307 。 


mt) < -十 一 1 
214 


.， 天 
(ii) 开 (t) 过 exp1 到 tl} 


证 明 i) 以 Xi, 匀 ,,…' 记 一 个 来 到 间隔 分 布 为 的 更 新 过 程 \N (7)， 
i 之 0} 的 来 到 间 隅 时间. 现在 


Nt+1 


>, X=t+Y 0) 


其 中 Y(G) 是 在 时 刻 上 的 镜 余 寿命 。 取 期 望 且 利 用 瓦尔 德 等 式 , 我 们 有 

A m+)=t+ ELY CC)] 
而 由 命题 8. 3. 2,E[Y()] 关 于 :递增 ,又 因为 E[Y (C0) 一 pu, 且 ( 见 第 三 章 命 
题 3. 4. 6) 


. _ pa 
limELY (2) = 
E+ tap Cm() 十 1) 十 训 - 


m7 -+ 二! 
274 


(ii) 对 恒等式 m (1) 二 > ) Fo) 求 微分 得 


m’' (tydt= >) F,' (td 
7 一 上 


= 和 PP{ 第 次 更 新 发 生 在 (4 ,t 十 df) 之 中 ) 十 of[ (dt)] 

二 P( 在 (t,t 十 dt) 中 发 生 一 次 更 新 } 十 oL (dt)] 
于 是 m' (1) 等 于 在 时 刻 t 发 生 一 次 更 新 的 概率 (强度 )。, 但 因为 XA4Q)) 是 已 
知 直到 : 为 止 的 历史 的 条 件 下 ,在 时 刻 上 发 生 一 次 更 新 的 概率 (强度 ), 所 以 我 
们 有 

m’' (1) = ELACA (GC))] 
之 A(z) 
而 上 述 不 等 式 成 立 是 因为 4 递减 , 且 4(0 委 上 对 上 述 不 等 式 积分 得 
。 308 。 


mW | MG)ds 
IH 


FC) =exp| 一 | Xas) 
可 见 
F(t)e ™® 
然后 由 (得 结论 。 


8.4” 似 然 比 序 


设 了 和 YY 为 连续 、 非 负 的 随机 变量 , 分 别 有 密 度 上 和 g。 我 们 
说 X 在 似 然 比 意义 下 大 于 工 ， 记 为 
XY 
如 果 对 一 切 zx 委 y 
1 (x) -f(y) 
BL) gC 
因此 会 了， 如 果 它 们 各 自 密度 的 比 f(z)/g Cz) 是 z 的 非 降 函 数 。 
我 们 先 注意 到 , 似 然 比 序 强 于 失效 率 序 ( 它 又 强 于 随机 大 于 序 )。 
命题 8. 4. 1 
设 X 和 YY 是非 负 随 机 变量 ， 有 密度 /和 gg， 失 效率 Xx 和 科 。 
如 果 
XY 
则 对 一 切 上 过 0， 有 
Ax (1t)Ay (1) 
证 明 因为 X 之 Y， 攻 对 Xx 之:， 有 f(z) 之 g(x)f()/g (2)。 从 而 
CD) 一 CD 
| f(r)dr 
二 f 0) 
[ga /edz 
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0) 
| gC)ar 
一 My (t) 
例 8. 4(a) 若 X 是 参数 为 4 的 指数 随机 变量 ,Y 是 参数 为 x 的 指数 随机 
变量 , 则 


HT) _ A ns 
g(XT) pK 


故 当 A 入 时 ,有 闵 安 7。 

例 8. 4(b)〉 一 个 统计 推断 问题 .统计 中 的 一 个 中 心 问题 ,是 对 一 个 给 定 
的 随机 变量 的 未 知 分 布 作出 推断 ,在 最 简单 的 情形 ,我 们 设 X 为 一 个 连续 随 
机 变量 , 它 有 密度 或 为 了 或 为 g。 根 据 X 的 观察 值 ,我 们 必须 决定 是 了 还 是 
Bo 

上 述 问题 的 一 个 决策 规划 是 一 个 函数 $(z) , 它 或 取 值 0 或 取 值 ,其 意义 
是 硅 X 的 观察 值 为 x,#《z) 一 0 时 决定 密度 是 f,$(z)==1 时 则 为 g. 为 了 有 助 
于 我 们 作出 一 个 好 的 决策 规则 , 先 注意 到 


| /war=|f gender 
表示 当 是 真实 的 密度 时 ,拒绝 f 的 概率 ,获得 一 个 决策 规则 的 经 典 方法 是 
国定 一 个 常数 w,0 委 o 委 1 ,然后 限于 考虑 满足 
(C8. 4. 1) | f(z) dra 
的 决策 规划 。 在 这 些 规 则 中 要 选 出 一 个 , 它 使 得 当 上 不 是 真实 的 密度 时 ,拒绝 
了 的 概率 最 大 ,也 即 , 它 使 
| gC)adr=|g ($dz 
最 大 。 按 此 准则 的 最 优 决策 规则 由 下 面 的 命题 给 出 ， 它 以 奈 曼 一 皮尔 逊 引 理 
著称 。 
奈 曼 一 皮尔 还 引 理 


所 有 满足 8. 4.1) 的 决策 规则 # 中 ,使 |gCz)$(z)dz 最 


大 的 $8 为 
0， 车 f(x)/g(x)>c 
$* (XT) = 
1， 若 f(r)/g (x)<e 


* 31]0* 


其 中 c 选取 得 使 
Jf (Xx)dzr=a 
证 明 设 + 满 足 (8.4.1), 对 任 一 zz 
: ($* Cr) $reg) — f(r)) 0 
因为 #8" (x)=1 时 ,乘积 的 两 项 均 非 负 ;, 而 8 (z) 二 0 时 ,两 项 均 非 正 ,所 以 上 
式 成 立 , 从 而 有 
| 9， cz 一 zy)(cg(z) 一 Fozyydzyz0 


故 
cL|#: Cg)dzr— |$z)gCz)dz] 
> |#° C0)f 6rdr— $6) fr) dz 
0 
这 就 证 明了 结论 ， 


如 果 我 们 现在 假设 /和 & 有 单调 似 然 比 序 , 即 f(z)/g(z) 关 

于 z 非 降 ,那么 这 个 最 优 决 策 规则 可 写成 
$* C2)— 二 当 z 宇 
1， 当 祥 过 k 


其 中 满足 
| fodr=a 


也 就 是 说 , 这 个 最 优 决策 规则 是 , 当 观 察 值 大 于 某 一 临界 值 时 , 则 
决定 真实 密度 为 f ,否则 决定 为 8。 

似 然 比 序 在 最 优化 理论 中 有 着 重要 的 应 用 ,下 列 命 题 是 十 分 
有 用 的 。 

命题 8. 4.2 

设 X 和 YY 相互 独立 ,分 别 具 有 密度 /和 8, 且 设 

X SY 
如 果 h(zx,y) 是 一 个 实 值 函 数 ,满足 ;zx 宇 y 时 
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h(z,y)>h(y,r) 


则 
h(X,Y)>h(Y,X) 
证 明 令 U==max( 了 X,Y),V 二 min( 匀 ,7 了 ) ,那么 在 条 件 U=u, V=v, ww 

之 v 之 下 ，h( 了 X,Y 了 ) 的 条 件 分 布 集中 在 hsv) 及 hCGv,w) 两 点 上 , 且 取 较 大 的 
值 ht,v) 的 概率 为 

MPIX=max(X,Y),Y=min(X,Y) IU—u,V =v 

_ f (Ww) gv) 
f QO)g) + fv) gC) 

类 似 地 有 ,在 条 件 品 =w,V==v 之 下 ,Ah(CY, 芒 ) 也 集中 在 两 点 husv) 及 有 (Cv,u) 
上 ,二 取 值 h(w,v) 的 概率 为 

N=P{Y=max (X,Y),X=min(X,Y)|U=u,V=v) 


_ gu)f (v) 
gu fv) tf uu) gv) 


因为 xz 之 v 
f(g(v) gu fv) 
故 , 在 条 件 U=w 和 V=v 之 下 ,h(X,Y) 随 机 大 于 hCY,XX), 即 
P{h(X,Y) alU,V}EP{h(Y ,XalU,V) 

现在 对 上 式 两 边 取 期 望 , 就 得 结论 。 

注 记 或 许 有 点 令 人 惊奇, 当 我 们 只 假设 XX 之 Y 时 ,上 述 结论 
不 一 定 成 立 。. 作 为 一 个 反例 ,注意 到 zx 之 y 时 2z 十 y 宇 z 十 2y, 然 而 ， 
若 久 和 和 Y 是 独立 的 , 且 


一 六 以 概率 0. 2 
9 ， 以 概率 0. 8 
r={ 以 概率 0. 2 
4， 以 概率 0. 8 


则 基 宇 了 ,但 PP{2X 十 Y 宇 11)==0.8, 而 P{2Y 十 XX 宇 11} = 二 0.8 十 


(0. 2)(0. 8) 一 0. 96。 于 是 2X 十 Y 不 随机 大 于 2Y 十 XX。 
命题 8. 4. 2 在 最 优 排序 问题 中 有 重要 的 应 用 .例如 ， 设 个 工 
件 要 排 成 某 种 加 工 顺 序 ， 每 个 工件 有 某 种 可 度量 的 特征 ， 例 如 一 
个 工件 的 可 度量 的 特征 可 以 是 完成 这 工件 的 加 工 所 需 时 间 . 假 设 ， 
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大 xz; 是 第 : 个 工件 的 可 度量 特征 ， 所 选 的 加 工 顺 序 是 1，2，…，? 
的 一 个 排列 二 ,天 ，…，zm， 那么 报酬 为 ACz ，z;…，zi; ) ,现在 我 
们 设 第 1 个 工件 的 可 度量 特征 是 一 个 随机 变量 , 壁 如 说 是 X;, i 一 
1] ， n。 如 果 


是 者 4 满足 y; 记 yi-1 时 

hy Yn Yi Vi Va) Rh CY Yi Yi Wit yn) 
那么 由 命题 8. 4. 2 得 出 ， 顺 序 1，2，…,，n ln, n 一 1,，…，1) 使 
报酬 随机 极 大 ( 极 小 ) ,为 了 明 上 及 这 一 点 ， 考 虚 任 一 不 从 第 1 个 工件 
开始 的 顺序 ， 璧 如 (21， 12» 1], 13» ""*， in-1)s 对 X;， AX;， "3 XX 
的 值 取 条 件 ， 我 们 可 以 用 命题 8. 4. 2 证 明 ， 顺 序 ( 人 ,1，,z,z3，…， 
z-1) 导 致 一 个 随机 更 大 的 报酬 .继续 这 样 的 交换 就 得 结论 : 1，2， 
…， 于 使 报酬 随机 极 大 。 类似 的 论证 可 证 明 ”， ”> 一 1，…，1 使 报 
一 随机 极 小 。) 

具有 密度 太 的 连续 随机 变量 X 称 为 有 递增 似 然 比 ， 如 果 log 
(f(z)) 是 四 的 ;如 果 logf(z) 是 凸 的 称 为 有 递减 似 然 比 .给 出 这 
个 术语 的 原因 是 ， 随机 变量 c 十 X 有 密度 三 zz 一 c)， 故 

cl 十 入 健 22 十 义 ， 对 一 切 cj 衬 c， 


1x， 对 一 切 a 之 e， 


© logf (x—c)—log/f (zx—c,) zx, 对 一 切 cl 之 c; 

合 ”logf (zx) 是 四 的 
因此 ,X 具有 递增 (递减 ) 似 然 比 ,如 果 c 增加 时 ,c 十 XX 按 似 然 比 序 
递增 (递减 ) 。 

作为 第 二 个 解释 ,回想 到 记号 X, 表示 一 个 寿命 为 XX 的 元 件 
达到 年 龄 上 之 后 的 剩余 寿命 。 既 然 
F(a)=P{X,>a} 
=F(G+a)/F() 
故 X, 的 密度 为 
* 313。 


fa)=f +a)/F 0) 
因此 ， 


f(s+a) 
六, 之 X,, 对 一 切 Ss 二 1 全 FUTa) a， 对 一 切 * 委 : 


siogj 太 xz) 是 四 
所 以 , 有 递增 似 然 比 , 如 果 * 增加 时 ,X, 按 似 然 比 序 递 减 . 类 似 
地 ,XX 有 递减 似 然 比 , 如果: 增加 时 ,XX, 按 似 然 比 序 递 增 。 
命题 8. 4.3 
车 了 基 有 递增 似 然 比 , 则 是 IFR .类 似 地 , 若 X 有 递减 似 然 
比 , 则 XX 是 DFR。 


证 明 
从 :从 从 ， MAx Ax (由 命题 8. 4. 1) 
汪汪 上， 
注 认 
(1) 使 log7(z) 为 止 函数 的 密度 函数 /(zx) 称 为 2 阶 波 里 亚 频 
率 密度 。 


(2) 也 可 对 值 域 相同 的 离散 随机 变量 定义 似 然 比 序 。 如 果 
已 (一 z)/P{Y 一 z} 关 于 工 递 增 , 则 称 X 关 7。 


8.5 随机 更 多 变 


我 们 记得 一 个 函数 hh 称 为 唔 的 ,如果 对 一 切 0 二 4<<1,zxi, zx;， 
有 
hlAri (1—Azr) RMT) To V(r,) 
我 们 说 XX 比 Y 了 更 多 变 , 记 为 XX 之 7 ,如 果 对 一 切 递增 凸 函 数 h 
(8. 5. 1) ELh(X) I>ELh(Y) | 
各 有 和 工分 别 有 分 布 玉 和 G, 那 么 (8.5.1) 成 立时 ,我 们 也 说 
《一 C。 当 (8. 5.1) 成 立时 为 什么 我 们 称 X 比 Y 更 多 变 的 解释 将 推 
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迟到 证 明了 下 述 绪 采 之 后 册 作 出 。 
命题 8. 5. 1 
若 X 和 Y 是 分 别 具 有 分 布 和 CG 的 非 负 随机 变量 , 则 XX 之 Y 


当 且 仅 当 对 一 切 < 之 0 
(8. 5. 2) | Ferdz>| Gn)az 
证 明 先 设 X 之 Y. 设 hs 定义 为 


0， Xa 
hz 一 人 一 oO 一 | 
TT 一 a， Ta 
由 于 hs 是 一 个 凸 的 增 函 数 , 所 以 我 们 有 
五 LA (和 ) 之 五 LA (7)] 
但 是 
E[h, CD]=| Pi (X -ar+>zrjaz 
=| P(X>atz}dz 
=| Fyay 
类 似 地 有 


EFh.(Y)]=| Gay 


从 而 证 明了 (8. 5. 2) 。 为 证 另 一 方向 的 结论 , 设 (8. 5.2) 对 一 切 a 之 0 成 立 ,以 
记 一 个 凸 的 增 汞 数 ,我 们 假设 它 是 二 次 可 微 的 .因为 h 为 上 三 的 等 价 于 r 宇 0， 
所 以 从 (8. 5.2) 得 

(8.5. 3) [oa] Forarda> | pa) | Gor)dzrde 


计算 上 式 的 左边 : 
| rc) fF (radxda -六 | madaF (rdx 


=| (FC dr —h' (0)ELX] 
= C2)| aF Cyydzx—h' (OECX] 


= jx Cx)dzrdF(y)—h' C0) ETX] 
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=| ppDdaFC) 一 MO 一 / (O)E[X] 
台 


=—E[h(X)]—h(0)—h' (0)ELX] 

由 于 用 请 代 蔡 GG 时， 类 似 的 等 式 也 成 立 ， 所 以 由 (8. 5.3〉 可 知 
(8. 5. 4) E[hC(X) ElLhCOY) ]>h' (0) (ELX)— ELY])) 
因为 有 (0) 宇 0(h 是 递增 的 ), 且 在 (8. 5.2) 中 令 a= 二 0 就 有 ELXJ] 宇 EL[Y1, 所 以 
上 述 不 等 式 的 右边 是 非 负 的 ， 

系 8.5. 2 

若 X 和 了 Y 是非 负 随机 变量 ,使 得 E[X]=E[YjJ, 则 X 之 Y 当 
且 仅 当 对 一 切 凸 函数 天 

ELACX) Il>ELA(Y) | 

证 明 设 h 为 凸 函数 , 且 设 XX 之 Y .不 等 式 (8. 5.4) 是 在 h 为 凸 的 假设 

下 得 到 的 , 故 由 于 ELXj==ELYjJ, 它 化 为 
ELh(X) ELh(Y)] 

结论 得 证 。 

因此 ， 对 两 个 具有 相同 均 什 的 非 负 随机 变量 ， 如 果 对 一 切 凸 
随 数 4， 有 LhCX)] 之 ELhCY)], 那 么 X 之 Y , 正 是 由 于 这 个 原因 ， 
我 们 说 之 Y 意味 着 X 比 Y 更 多 变 , 也 就 是 ,直观 地 看 ,XX 比 了 更 
多 变 , 如 有 果 它 给 边 端 的 值 更 大 的 权 , 而 保证 这 一 点 的 一 条 途径 就 是 
要 求 :h 为 是 函数 的 ,有 ELhCX)j] 宇 Efh(Y)j],( 例 如 ,由 于 ELX] 
二 ELYj 和 有 h(z) 二 为 同 函 数 , 所 以 我 们 有 Var(X) 宇 Var(Y).,) 

系 8. 5.3 

者 X 和 了 是 非 负 随 机 变量 ,上 且 ELXj] 二 EL[Yj， 则 X 之 Y 北 仿 
一 XX 之 一 Y。 

证 明 以 h 记 一 个 递增 的 三 函数 ,我 们 必须 证 明 

Elh(—~X)]>Eh(—Y)] 

然而 ,这 由 系 8. 5. 2 可 得 ,因为 陪 数 f(z) 二 hh( 一 x) 为 同 。 
我 们 的 下 一 个 结果 是 处 理 变 动 性 序 的 保持 问题 。 

命题 8. 5. 4 
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石 XI，AX2，…， 和 相互 独 这 ， 呈 5，…，Y， 相互 独立 ， 日文; 

>Yi，i=1，…，m， 则 对 一 切 递增 函数 5 
Eg (全 1 过 SC) 

证 明 ”从 假设 2n 个 随机 变量 都 相互 独立 开始 .对 n 用 归纳 法 证 明 。 当 

n 一 1 时 ， 我 们 必须 证 明 ， 当 g 入 是 递增 是 函数 ， 且 Xi 之 YI 时 ， 有 
ElLh(g(X1)) ELh(g CY1)) |] 

这 由 X! 之 Yi 的 定义 及 hlg(z)) 是 递增 凸 函 数 可 得 ,而 hl(g (zx)) 为 递增 凸 函数 
是 因为 


d 上 
了 RS(CZ) ) =h (g(r))g' (rz)20 


2 
Shlg C2)) =h"(g (zr) Cg’ (zZ))2 十 《gz))e (zz) 之 0 


设 结 论 对 ”一 1 个 分 量 的 向 量 成 立 , 再 令 g 和 hh 是 递增 晤 函数 ,现在 
ELh(lg(X1, Xs ,X,))|X1=x] 
= ELh(g(zr,X,, "on ,Xn))| XI=z | 


= ELh(g(zr,X,* ,XX,))] 《由 XX!,… ,XX, 的 独立 性 ) 

>E[h(g(r,Y,,*…,Y,))] 《由 归纳 法 假设 ) 

一 区 LACgE(X 7 … 7))| 和 一 工 ] (由 Xi 7: Y, 的 独立 性 ) 
取 期 望 得 


ELlh(gX ,X27 KR)) ELh(g CX ,YY,,*: »Y,)) | 


然而 ， 对 了 ，，…，Y， 取 条 件 且 利用 zz=1 时 的 结果 ， 我 们 能 够 证 明 

ElhCg (Xi,Y2,° 7))] 之 开 LRCgECOm Ys, ,Y,))] 
这 就 证 明了 结论 ,因为 假设 2 个 随机 变量 是 独立 的 不 影响 g&(X1,…,X,) 和 
8g 《Yi1,，*…*…，Y,) 的 分 布 , 所 以 在 两 组 ”个 随机 变量 各 自 独 立 的 较 弱 的 假设 下 ， 
结论 仍然 为 真 。 


8.6 变动 性 序 的 应 用 


在 叙述 变动 性 序 的 一 些 应 用 之 前 ,我 们 将 确 定 一 类 随机 变量 ， 
它们 比 指数 随机 变量 更 多 (或 更 少 ) 变 。 
定义 非 负 随机 变量 X 称 为 新 的 平均 比 用 过 的 好 (NBUE)， 
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如 果 对 一 切 a 之 0 
E[X—alX>al<ELX] 

它 称 为 新 的 平均 比 用 过 的 差 (NWUE)， 如 果 对 一 切 a 之 0 
E[X — alX > aj> ELX] 

如 果 我 们 把 XX 看 作 某 种 元 件 的 寿命 ， 那么 XX 是 NBUE 
(NWUE) 意 味 着 : 任 一 个 用 过 的 元 件 的 平均 剩余 寿命 小 于 (大 于 ) 
或 等 于 一 个 新 的 元 件 的 平均 寿命 .如 果 X 是 NBUE, Ff 是 X 的 分 
布 ， 则 称 下 为 一 个 NBUE 分 布 .对 NWUE 也 类 似 地 定义 。 

命题 8. 6.1 

车 是 一 个 NBUE 分 布 ， 均 值 为 x， 则 

F <exp(p) 
其 中 exp (p42) 是 均值 为 y 的 指数 分 布 。 若 f 是 NWUE, 那么 上 述 不 
等 式 反 问 。 

证 明 设 下 是 均值 为 px 的 NBUE .由 命题 8.5.1, 我 们 必须 证 明 , 对 一 
切 c 守 0 
(8. 6. 1) | Fryar 去 | edz 
如 果 瑟 服从 分 布下 ， 则 

E[X—alX>a]= | -Pix —a>z|X> cajdz 


= F(a 士 之 ) 
一 一 二 一 一 Cr 


0 F(a) 


FOy), 
-| Fa) 


因此 ， 对 均值 为 上 的 NBUE 分 布 有 


“FCy) ， 
, Fe SEK 


F(a) 
| Flydy 


1 
> 


F(a) 


| Fdy 4 


| 


我 们 可 以 通过 变量 交换 + 一 | F(y)dy,dz 一 一 F(a)da 求 上 式 左边 的 值 ,得 


上 
A 


其 中 z(c) 一 | FC)dy. 积 分 得 


og Foy) > < 
c A ~ 
或 
| Fay < pe 


这 就 证 明了 (8. 6.1).F 是 NWUE 时 证 明 类 似 。 

8. 6.1 上 比较 G/G/1 排 队 系 统 

CG/G/1 系 统 假设 顾客 来 到 间隔 时 间 X, (4 宇 1) 是 独立 同 分 布 ， 
相继 的 服务 时 间 S, (nx 之 1) 也 是 如 此 。 只 有 一 个 服务 员 , 服务 规则 
为 “ 先 来 先 服务 ”。 

如 果 我 们 以 D; 记 第 =” 个 顾客 在 排队 中 的 等 待 时 间 , 那 么 容易 
验证 (如 果 你 不 能 验证 它 , 见 第 七 章 7. 1 节 ) 下 列 递 推 公式 ; 

Di=0 

(8. 6. 2) Dr—=max{0, D,+S,— 08X11} 

定理 8.6.2 考虑 两 个 G/G/1 系 统 ,第 i 个 系统 (= 二 1,2) 具 有 
来 到 间隔 时 间 Xs 和 服务 时 间 S2 ,nn 之 1, 以 De 记 在 系统 i(i==1， 
2) 中 的 第 ”个 顾客 在 排队 中 的 等 待 时 间 。 如 果 有 

(1) ELXY |] 一 EL[X®?] 

(11) XD 之 全 > SD > 2 
那么 对 一 切 

D;"” 之 DY 

证 明 用 归纳 法 证 明 。 因 为 对 n==1 它 是 显然 的 , 所 以 假设 对 成 立 . 今 

有 
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Do >>Df (由 归纳 法 假设 ) 
Sm 5 (由 假定 ) 
一 名 宇 一 XX (由 系 8. 5. 3) 
从 而 ， 由 命题 8. 5. 4， 得 
DY + SY — XE DY 十 3 — XH 
因为 h(x) 二 max(0,z) 是 一 个 递增 巴 函 数 , 所 以 由 递 推 公式 (8. 6.2) 和 命题 
8. 5. 4 椎 出 
DY, >D, 
从 而 完成 了 证 明 。 
以 Wo 二 limELD,」 记 一 个 顾客 在 排队 中 的 平均 等 待 时 间 。 
系 8. 6, 3( 对 一 个 ELSj 过 ELXj] 的 G/G/1 排 队 系 统 ) 
QG》 奉 来 到 间隔 的 分 布 是 均值 为 1/4 的 NBUE， 则 
站 下 2 
Wo < 3 Es 
若 分 布 为 NWUE，、 则 上 述 不 等 式 反 向 。 
(11) 车 服务 时 间 的 分 布 是 均值 为 1/x 的 NBUE， 则 
Wo 4B(1 — pb) 
其 中 86 是 


p= [emo pdG) 


的 解 ， 而 G 是 来 到 间隔 的 分 布 . 若 服务 时 间 分 布 是 NWUE， 则 上 
述 不 等 式 反 回 。 

证 明 ”由 命题 8. 6. 1， 一 个 NBUE 分 布 比 一 个 具有 相同 均值 的 指数 分 
布 较 少 变 。 因 此 ， 在 (中 我 们 可 以 将 系统 与 MM/G/1 比 较 , 在 (i) 中 与 G/M/1 
比较 .由 于 (和 (ii) 中 不 等 式 的 右边 分 别 是 M/G/1 和 G/M/1 系 统 中 顾客 在 
排队 中 的 平均 等 待 时 间 ( 见 第 四 章 例 4. 3 (a) 和 例 4. 3 (b)), 所 以 由 定理 8. 6. 2 
得 出 结论 。 

8. 6- 2 ”对 更 新 过 程 的 一 个 应 用 

设 {NE(E),t 之 0}) 为 一 个 来 到 间隔 分 布 为 F 的 更 新 过 程 .在 这 
一 节 中 ， 我 们 的 目的 是 证 明 下 列 定 理 。 
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定理 8.6.4 若是 均值 为 1 的 NBUE， 则 Ns (1)< NG), 
其 中 Nb 是 参数 为 1/au 的 泊 松 过 程 . 若 已 是 NWUE , 则 不 等 式 反 
向 。 

极为 有 趣 的 是 , 证 明 一 个 更 一 般 的 结论 , 反而 更 容易 。( 关 于 
这 一 点 以 后 还 要 谈 到 。) 

引 理 8. 6.5 

令 ;，i 之 1 ,是 均值 为 4 的 NBUE 分 布 ， 且 G 是 均值 为 4 的 
指数 分 布 ， 那 么 对 每 个 有 宇 1 


(8. 6. 3) Dy Fx Fy Fi)) < > Ga) 
1 一 此 {一 此 


其 中 * 表示 卷 积 ， Gw 是 G 自身 的 7 重 卷 积 。 
证 明 对 上 用 归纳 法 证 明 。 为 证 8=1 时 成 立 , 设 Xi, XX,,，… 相 互 独立 ， 
广 ; 具有 分 布 ;， 令 
N*() 一 max {n: SX. < 
现在 由 所 尔 德 等 式 得 


能 够 证 明 瓦尔 德 等 式 对 独立 的 、 非 负 的 、 具 有 相同 均值 的 X; 也 成 立 (尽管 它 
们 不 同 分 布 )。 我 们 也 有 


NOD 十 1 


2， 世 = 上 十 从 :直到 N' 增加 为 止 的 时 间 


+ 一 】 


而 上 [从 i 直到 NM 增加 为 止 的 时 间 ] 等 于 诸 X 中 的 一 个 的 平均 剩余 寿命 ,于 
是 由 NBUE， 它 小 于 或 等 于 yx， 即 


N™ (+1 


E| > Xl]<t+wu 
i=1 


然后 由 (8. 6. 4)， 得 
(8. 6. 5) EL[N* (GD 去 zu 


ELN (4)]= > PIN GD) 7) 


* 32 ，。 


一 >jP{X) 十 Xi 十 … 十 XX 世博 
一 1 


= DFix* xF,)(t) 
i=1 


类 似 地 ,= 二 1 时 ， 因 为 (8.6. 3) 的 右边 是 指数 更 新 过 程 在 时 刻 上 的 均值 (或 1/ 
;所 以 ,由 (8. 6.5) 知 (8. 6.3) 在 =1 时 成 立 。 
现在 设 (8. 6. 3) 对 上 上 成立， 我 们 有 


2) Pix FCG) 


fr 二 二 十 1 


= DY | Fre FG — zdF(z) 


i=k41" 0 


一 | Ba, 其 ea 并 人 -一 TdF ,r(x) 
f=* 
了 一 上 


一 > Go * Fjr1) Ct) 


J 一 上 


一 | SG x Fj) x G) C2) 
j= 上 


< (| > cu * G) (0) (由 归纳 法 假设 ) 


这 就 完成 了 证 明 
现在 我 们 已 准备 好 证 明定 理 8. 6. 4。 
定理 8. 6.4 的 证 明 由 命题 8. 5.1， 我 们 必须 证 明 对 一 切 & 宇 1 


DPINEOD 7) < DPING 7) 


了 一 并 J 二 上 


但 是 , 上 式 的 左边 等 于 (8. 6. 3) 的 左边 ,其 中 每 个 F; 等 于 ,而 上 式 的 右边 正 
是 (8. 6. 3) 的 右边 。 
注 记 ”倘若 我 们 试图 直接 证 明 
。322。 


>roos > coo， 
其 中 严 是 NBUE, G 是 指数 分 布 ,具有 相同 的 均值 .那么 我 们 可 能 
试图 对 k 用 归纳 法 .一 1 时 的 证 明 与 我 们 在 引 理 8. 6. 5 中 所 用 完全 
一 样 。 可 是 ， 当 我 们 从 假设 结论 对 & 成 立 去 证 明 对 4 十 1 也 成 立时 ， 
我 们 会 证 到 这 样 一 步 
2 Fo | Go x F) x 

然而 ， 在 这 一 步 ， 归 纳 法 假设 还 不 足以 使 我 们 推断 出 右边 小 于 或 
等 于 ( Gow) * 下 .道理 在 于 ,有 时 使 用 归纳 法 时 证 明 一 个 更 强 的 


结论 反而 更 加 容易 ， 因 为 归纳 法 假设 也 提供 了 更 多 的 东西 可 派 用 
处 。 

8. 6.3 ”对 分 支 过 程 的 一 个 应 用 * 

考虑 两 个 分 支 过 程 ,以 Fi 和 ,分 别 记 这 两 个 过 程 中 的 每 个 个 
体 的 后 代数 的 分 布 .假设 

FF, 

也 就 是 ， 我 们 假设 在 第 一 个 过 程 中 每 个 个 体 的 后 代数 更 多 变 ， 以 
ZOG==1,2) 记 第 i 个 过 程 的 第 nn 代 的 总 量 。 

定理 8.6.6 若 Z0 二 1, i 一 1,2， 则 对 一 切 n，、2Z 守 Z 3， 

证 明 对 n 用 归纳 法 证 明 。 因 为 它 对 n= 二 0 成 立 , 所 以 设 它 对 7 成立, 今 
有 


ZC1) 


n 

{1) — > 
nt] | 和; 

j=1 


202) 
Z%, = > 
其 中 X; 是 独立 的 , 具有 分 布 F(X; 表示 第 一 个 过 程 的 第 代 中 的 第 7 个 人 


* 为 复习 这 种 模型 ， 读 者 应 参考 第 四 章 4. 5 节 。 
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的 后 代数 )，Y; 是 独立 的 ， 具 有 分 布 ;。 因 为 
从) 之 六 《由 假定 ) 
且 
Z8 之 Z4 (由 归纳 法 假设 ) 

结论 由 下 列 引 理 可 得 。 

引 理 8. 6.7 

设 XX1，X,， “是 一 列 非 负 独立 同 分 布 的 随机 变量 ， Yi, Y,, … 也 类 似 。 
设 X 和 MM 是 整 值 非 负 随机 变量 ， 它 们 与 诸 X; 和 诸 Y; 独立 。 则 


N M 
XY,N>M > XY. 
v Y i=1] ” i=] 
证 明 我 们 先 证 
(8. 6. 6) Xi 2X 


Vv ， 


以 记 一 个 递增 凸 函数 ,为 了 证 明 (8. 6. 6) ， 我 们 必须 证 明 
N _ M 
(8. 6.7) Elh( x) |> Ehl 2 X:) | 
因为 NN 之 M， 且 它们 与 诸 Xi; 独立 ， 所 以 如 果 我 们 能 证 明定 义 为 
gn) 一 五 [R(X + … + X,)] 
的 函数 g(n) 是 的 递增 同 函数 ,就 得 不 等 式 (8. 6.7)。 由 于 有 递增 ,每 个 广 ， 


非 负 ,所 以 gz) 显然 是 递增 的 。 剩 下 证 明 g 是 西 的 ， 或 等 价 地 
(8. 6. 8) 8(n 十 1) 一 gln) ”关于 nn 是 递增 的 


为 了 证 明 这 一 点 , 令 3, = ZX ， 且 注 意 到 
g(nt 1)— gln) = ELhCS, + X41) — hCGS,)] 
现在 
ELhCS, X11) —hCS,) |S, = 
一 E[hG 十 X11) 一 h(2)j] 二 f(t》 ( 记 作 几 ) 
因为 h 是 凸 的 , 故 f 关于 :递增 ,又 因为 5S, 关于 有 递增 ,也 可 见 E[/CS,)] 关 
于 nn 递增 .然而 
ELf(S,)| = gtn+1)— gn) 

故 (8. 6. 8) 和 (8. 6.7) 得 以 满足 。 

于 是 我 们 证 明了 
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3 
为 完成 证 明 , 只 需 证 明 
2x>2 
或 等 价 地 ,对 递增 凸 肾 数 有 和 
g[s( SX) J> [4( SY) ] 
然而 精 


Efal >x) = 加 一 EM 沁 Xi) ] (由 独立 性 ) 
> ET SY)] (为 Sx, > 


— Enl( 之 站 IM =m | 
上 式 两 边 取 期 望 就 得 结论 。 


这 样 我 们 就 证 明了 定理 8. 6. 6, 它 说 第 一 个 过 程 中 第 ” 代 的 人 
口 总 量 比 第 二 个 过 程 中 的 更 多 变 。 在 本 市 的 结尾 我 们 将 证 明 , 若 第 
二 个 ( 较 少 变 的 ) 过 程 具 有 与 第 一 个 过 程 相同 的 每 个 个 体 的 平均 后 


代数 , 则 在 每 一 代 它 灭绝 的 可 能 性 较 小 。 
系 8. 6.8 


设 屿 和 pz 分 别 为 后 代数 分 布 和 的 均值 , 硅 ZZ =1,i== 


1,2,4= p= ph F; , 则 对 一 切 = 
P{Z® 一 0} > P{Z% = 0) 
证 明 ”由 定理 8. 6. 6 得 Z4 之 2Z9 ,从 而 由 命题 8. 5. 1 得 


[= wl 


ZJP{ZP Zi DP{2® 7) 


全 全 
或 等 价 地 ,由 于 
E[Z,| = Sp(z, 宇 让 二 je 
我 们 有 
一 PlZo 之 1} 之 1 一 P 了 {Zr? 之 1) 
或 
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己 (Z 之 1 之 2 之 1) 


这 就 证 明了 绪论 。 


习 是 


. 若 取 宇 Y， 证 明 : X+>7Y+ 和 YY 全 和 。 
2. 设 X: 之 Y,， i 一 ]，2, 通 过 反例 说 明 X1+ XY +Y,, 不 一 定 正 确 。 


1 
2 be 


(b) 车 P{X>Y) 之 地 ,PtY 之 2) 之 户 , 且 X,，Y, Z 独立, 是 否 可 以 推出 


lt 


3. (a) 若 X 之 Y， 假 设 X 与 Y 独立 ,证 明 P{X 之 Y) 之 


P(X 之 Z} 之 志 ? 证 明 或 给 出 一 个 反例 。 
.7 个 元 素 中 的 一 个 被 需求 ， 以 概率 P; 需求 元 素 i ;二 1，2，…，n。 如 果 把 
这 些 元 素 排 成 一 个 有 序 名 册 ， 求 使 所 需求 的 元 素 的 位 置 随机 极 小 的 排 法 。 
- 称 一 个 随机 变量 服从 一 个 六 -分 布 , 如 果 对 某 ;>>0, “>>0, 它 有 密度 函数 为 


Ae—* (AL)! 
TT(a) 7 


Ct 


f(t)= 1 之 0 


其 中 
Tloa) = 上 | e TT dr 
[ 


证 明 : a 宇 1 时 它 为 IFR，a 志 1 时 为 DFR。 

. 若 X,i 二 1,2,…,n, 是 独立 的 IFR 随机 变量 ， 证 明 min (Xi,…, 义 ,) 也 是 
IFR .给 出 一 个 反例 说 明 max (Xi1,…,X,) 不 一 定 是 。 

能 够 证 明 下 述 的 关于 IFR 分 布 的 定理 。 

定理 : 若 所 和 C 是 IFR， 则 下 和 GC 的 着 积 FxG 也 是 。 

证 明 : 用 DFR 代替 IFR 时 ， 上 述 定 理 不 真 。 

. 称 一 个 取 非 负 整 数值 的 随机 变量 为 离散 的 IFR， 如 果 

PIX 一 kX 之 k) 关 于 非 降 ， k=0,1,* 
证 明 : (a》 二 项 分 布 随 机 变量 ,，(b) 泊 松 随机 变量 ，(c) 负 二 项 分 布 随机 
变量 ， 都 是 离散 的 IFR 随机 变量 。 

(提示 : 证明 会 更 容易 些 , 如 果 利 用 IFR 分 布 的 卷 积 ( 习 题 7 中 叙述 的 定理 ， 
它 对 离散 的 IFR 分 布 仍 成 立 ) 和 极限 仍然 为 IFR。) 
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~ 


oe 


9. 证 明 ; 一 个 二 项 (n，p) 分 布 B,.。， 既 随 n 的 增加 ， 也 随 p 的 增加 而 随机 


12. 


13. 


14. 


增加 ， 即 B.。， 关 于 及 上 递增。 
10. 


考虑 一 个 状态 为 0，1，…，# 的 马尔 可 夫 链 ， 其 转移 概率 
已 oo 一 已. 一 上 
Pi= 和 7 ?一 上 ，***, nl1 
1] 一 ci 若 7 一 :十 &(Cz) 


其 中 (2) 之 0。 以 fi 记 这 个 马尔 可 夫 链 从 状态 i 出 发 迟早 进入 状态 0 的 概 
率 .证 明 : fi 是 (ci,，…,c,1) 的 增 函 数 。( 提 示 : 考虑 两 个 这 样 的 链 ， 一 
个 有 (ci，…，c,_1)， 另 一 个 有 (61，…，c,_1)， 其 中 cj 实 cj。 假 设 它们 都 
从 状态 i 出 发 , 耦合 这 二 个 过 程 , 使 得 第 一 个 过 程 的 下 一 个 状态 不 小 于 第 
二 个 过 程 的 下 一 个 状态 。 然 后 让 第 一 个 过 程 游 动 (保持 第 二 个 过 程 固 定 )， 
直至 它 的 状态 与 第 二 个 过 程 一 样 或 处 于 状态 4。 如 果 它 处 于 相同 的 状态 ， 
则 重复 以 上 的 步骤 。) 


` 证 明 ;均值 为 x 和 方差 为 r 的 正 态 分 布 随 w 增加 而 随机 增加 。 当 一 增加 时 


如 何 ? 
考虑 一 个 具有 转移 概率 矩阵 (Pij) 的 马尔 可 夫 链 , 且 设 对 一 切 ， Pi 关 
于 i 递增。 

(a》 证 明 : 对 一 切 递增 函数 /， 之 ;Psf (i) 关 于 ;i 递增 。 


(b) 证 明 : 对 一 切 4 之/P9 关 于 i 递增 ,其 中 户 是 n 步 转移 概率 ,nn 之 2。 


设 iNi:(t),(t 之 0},i 二 1,2, 为 两 个 更 新 过 程 ,分 别 有 来 到 间隔 分 布 和 
Fo 以 XG) 启 ,的 失效 率 耳 数 ,i 二 1,2。 若 对 一 切 s，,t 
A1(t) 守 A (5) 
证 明 : 对 任何 集合 T),… ,TT，， 
NT so NOT )) FN TD) ,oe Na(T,)) 
考虑 一 个 条 件 泊 松 过 程 ( 见 第 二 章 2. 6 节 )。 也 就 是 , 设 A 是 一 个 分 布 为 G 
的 非 负 随机 变量 , {N(2),t 宇 0} 是 一 个 计数 过 程 , 它 在 A 二 4 的 条 件 下 是 一 
个 参数 为 4 的 泊 松 过 程 .以 Gi 记 给 定 N(2)=n 时 A 的 条 件 分 布 。 
(a) 导出 Gs 的 一 个 表达 式 。 
(b) Gs 关于 随机 递增 吗 ? 关 于 1 随机 递减 吗 ? 
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1 


16. 


(c) 给 定 入 (二 n, 以 Yi,: 记 从 t 直到 下 一 个 事件 为 止 的 时 间 。Y,,, 关 于 zt 随 
机 递增 吗 ? 关 于 随机 递减 吗 ? 


` 设 X 和 分别 具 有 失效 率 图 数 国 (上 和 和 (2) 证明: 对 一 切 t, 访 (4) 之 


(zt) 当 和 且 仅 当 对 一 切 ;二 z 
P{X>t} _P{(X,>t) 


P{Xi1>s} “SP{X,>s)} 
设 藉 和 了 分 别 具 有 失效 率 函 数 Mrx( 人 和 好 (人 )， 且 对 一 切 二 Mrs Ai7(CD)、 
定义 随机 变量 XX 如 下 :如 果 Y=z, 那 么 
二 | 以 概率 hx (1) /hy (0) 


lz+X,, 以 概率 1 一 Ax (2) /Ny (2) 


其 中 X, 是 一 个 与 其 它 变 量 独立 的 随机 变量 ， 具 有 分 布 


P{X>i+s} 
P{X>t)} 


P{X,>s}= 


| 证 明 : XX 与 XX 同 分 布 。 


17. 


18. 


19. 


20. 


设 F 和 G 具有 失效 率 函 数 rr 和 说 ,证 明 : 对 一 切 :，AhF (2) 宇 GG) 当 且 仅 
当 存 在 独立 的 、 连 续 的 随机 变量 Y 和 2Z， 使 得 Y 有 分 布 G，min(Y,Z) 有 
分 布 正 。 
一 族 随机 变量 (Xeo,b6 La,2J) 称 为 一 个 单调 似 然 比 族 , 如果 2 和 % 时 Xe 
Xo,。 证 明 下 列 随机 变量 族 具 有 单调 似 然 比 : 

(a) Xs 是 参数 为 x，9 的 二 项 分 布 随机 变量 ，n 固定， 

(b) Xo 是 均值 为 2 的 泊 松 随机 变量 。 

(c) Xe 是 (0,2) 上 的 均匀 分 布 随 机 变量 。 

(d) Xe 是 参数 为 (n,1/0) 的 -随机 变量 , 固定 。 

(e) Xo 是 参数 为 (9, 和 ) 的 -随机 变量 ，4 固定 。 

考虑 一 个 统计 推断 问题 ,其 中 随机 变量 X 有 密度 或 为 或 为 g. 贝 叶 斯 方 
法 是 规定 一 个 了 是 真实 密度 的 先 验 概率 p。f 为 真实 密度 这 一 假设 被 接 
受 , 如果 X 的 值 给 定时 ,其 后 验 概率 大 于 其 临界 值 .证 明 ; 如 果 f(x)/g (zx) 
关于 工 非 降 ， 这 等 价 于 X 的 观察 值 大 于 某 临界 值 时 接受 f， 

我 们 有 项 工作 ， 第 i 项 工作 和 需 花 随机 时 间 X; 去 做 。 这 些 工 作 必须 相继 
地 进行 .我 们 的 目标 是 使 到 (固定 的 ) 时 刻 上 为止 所 进行 的 工作 项 数 随机 
最 大 。 

(a) 确定 最 优 策略 ， 如 果 
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及 :1 z 一 1，2，…， n—1 
LR 


Cb》 如果 我 们 仅 假设 
XXit, 1 一 1，2，…， 严 一 上 
则 如 何 ? 

21. 有 ”种 作物 ， 与 第 ; 种 作物 联系 着 一 个 随机 变量 Xi, i 二 1，2,，…，n。 如 
果 在 时 刻 上 将 第 ; 种 作物 种 植 到 大 田 里 ， 那 么 它 的 田间 寿命 为 Xie“。 当 
KiKitl, i 二 1]，2,…,， 一] 时 ， 怎样 的 种 植 顺序 使 全 部 作物 的 总 田间 
寿命 随机 极 大 ?注意 , 若 * 一 2 及 使 用 的 顺序 为 1, 2, 则 总 的 田间 寿命 为 XI 
十 和 2e- 亿 1 。 

22. 证 明 : 具有 下 列 密度 的 随机 变量 有 递增 似 然 比 ， 即 密度 的 对 数 是 四 函数 。 
(a) 本 -分 布 : f(x) 一 Ae ~*(Az)" 1/T(a)， a 之 1 
(b) 威 布 尔 分 布 : f(x)=aAhr)" le ， a>l 
(c) 截 为 正 的 正 态 分 布 : 


f(z) == l ec-O /2o ， 工 盖 0 
a 2X0 

23- 设 闵 !， XX，…，X。 相互 独立 ,Yi，…,，Y, 相互 独立 .或 XX: 之 Yi, i 一 1, 2， 

"eo H's 证 明 : 

Efmax Xi,*…,X,) ECLmax (YF,.… ,Y,)] 

不 假设 独立 性 的 给 出 一 个 反例 。 

24. 证 明 : F 是 一 个 NBUE 随机 变量 的 分 布 当 且 仅 当 对 一 切 a 
F.(a)< Fa) 
其 中 F. 是 下 的 平衡 分 布 ， 定 义 为 


F(a) =| 人 zx 
。 k 


而 kx 一 | F(z)dz, 
25. 证 明 下 述 命题 或 给 出 反例 : 若 F 之 G, 则 NeFG) 之 NcCi) ,其 中 (NapGi 之 


0} 是 来 到 间隔 分 布 为 已 的 更 新 过 程 ,H= 二 fF,G。 
26. 设 六 1; 义 ，，… 有， 相互 独立 , 且 P{X, 一 1} 二 P; 一 1 一 P{X; 一 0},i1 二 1,2， 
… ,nn。 证 明 ; 


XSBin(n,p) 
1=1 ™ 
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其 中 Bin (n，p)， 是 参数 为 x 和 zp 一 >,pi/n 的 二 项 分 布 随机 变量 。 


(提示 先 对 一 2 证 明 结论 ,利用 上 述 结果 证 明之 /X,<Y, 其 中 Y 是 均值 
为 np 的 泊 松 随机 变量 ,因此 , 例如 一 个 泊 松 随机 变量 比 一 个 有 相间 均值 
的 二 项 分 布 随机 变量 更 多 变 。) 
整 值 随机 变量 ,使 得 Pl7Y 二 1}==0 及 ELYj] 一 M, 证 明 :X<<Y。 
28. 延 和 森 不 等 式 说 ， 对 一 个 凸 函 数 f 
ELf(X) |>f(ELX]) 
(a) 证 明 延 森 不 等 式 。 
(b) 和 耕 X 有 均值 五 LIX] ,证 明 : 
XE[X] 
其 中 ELXj] 为 常数 随机 变量 。 
Cc》 设 存 在 一 个 随机 变量 Z， 满 足 EL[Z1Y] 之 0, 且 XX 与 Y 十 Z 同 分 布 .证 
明 XX 之 Y .实际 上 ,可 以 证 明 这 是 XX 之 Y 的 一 个 充 要 条 件 ( 男 一 个 方向 
的 证 明 是 困难 的 ) 。 
29. 如 果 ELXj] 二 0, 证 明 :c 之 1 时 ,cX 之 X。 
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习题 选 解 与 部 分 爸 有 对 


第 一 章 


s. (a) PCN =m Ns=n2a0  N,=n,)= nt/ |r ) || Ps 


i 二 1 i 二 1 


其 中 Mi 一 0, nn 及》jni 一 n 
(b) E[N;| = nP;, ELN?] = nP,; — nP! + npP? 
EL[LN;] = nP;, ELN?] = nP; — nPi 十 天 局 
ELNN,] 一 ELELNN,|N, |] 
ELNNj,IN; = m|] = mELN.IN; = m| 


mn m) P: nmP: — miP: 
Nr nE[LN ,JP. 一 ELN:]P. n2P,P; — nP.P; 十 nPiP; 一 noP,P. 
ELNN, , 1 一 卫 ， 1—P, 
2pPP/I1_ py _ PP/I1 PP 
= 一 一 7 ne PP; 一 7PiP 
了 


CovCNi Ni) =ELNN 一 ELN ELN = 一 PP， 天 7 
1 ， 结果 7 
Cc) 令 7 一 若 结果 7 从 未 出 现 
0， 其它 
E[T;] = (1 —P)", Varll;)|] = (1 — P)"(l— (1— PP,)") 
El1.l;] = (1 — P;— P,)”, z 天 7 


未 出 现 的 结果 的 个 数 = 》) 了 


7 了 = 1 


E[yD= 六 (1 -Ph 


j=1 了 一 1 


Var[ $1)] 一 SVar[1)] + >) 2 Covd;,1)) 


i | i 
Cov(1i,1)) = ELL1;] — ELTJELT,] 
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=(1— PP — (oP) (— PP,)" 


Var[ 51]= 2 (1 一 Pr 一 (一己 D77) 


+ SWAP— Po (oP) — P,)"] 
25 


1 全 车 在 时 刻 i 有 一 个 纪录 
”lo， 其它 


EL[N,] = DJEL] = > 


了 一 1 一 1 


Var[N,] 一 >)Var[1] 一 > 了 (1 一 地), 因 为 1 相互 独立 。 


(b) 令 工 =min{n; 之 1 且 在 时 刻 产生 一 个 纪录 ) 
Tn 局 AI 一 有 XXX 中 的 最 大 者 


E[T] = 》P 人 (> 对 一 》， 二 一 cc 


开 二 1 好 一 1 


Pi{T = eco) 一 limP{T > 2 一 0 
(c) 以 了 记 第 一 个 大 于 > 的 纪录 值 的 时 刻 ， 以 Xry 记 时 刻 了 的 纪录 值 。 
P{Xr, > rT,=n} 一 已 (其 > TIX < ye > yy) 
= P{X, > zx|X, > y} 
_1/1 ， Ty 
FO/F(Oy), zr>y 
由 于 PtX7y> 妆 7 一 2 不 依赖 于 n， 得 出 T, 与 X7, 独立 的 结论 。 
12. PIN = 0) = P 了 (Uj <e 一 。 假 设 
PN =n) = P{U, et UU, ee 
= eX /nl 
从 而 
P{N=n+t+1)} 
一 | Pt eh, UU et UU,, elU, = rz}dr 


1 EC 一 e+ e+ 
一 | (5 之 zr :LU 之 02 U, 2 < 一 | az 


一 | je At logz)"” 7 


了 2 | 
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其 中 最 后 的 等 式 得 自 归纳 法 假设 ,因为 e“/+ 一 e。“*+%”。 由 上 式 我 们 有 


1 一 下 nm 
PIN = 二 1) 一 本 e ”MA+ logz)” ,, 


eA a 
ef4 
一 -一 | ydy (由 yy 一 4 十 logz) 
n1Jo 
= e XT 1)1 
这 就 完成 了 归纳 法 证 明 。 


13. Var(X|Y ) = EL(X — EC(X|Y)):|Y|] 
= ELX’:— 2XELX|IY |] (ELX|Y]J)?|Y] 
一 ELX?|Y] 一 2 (EL[X|IY]):+ (ELX|IY]): 
= ELX?*|Y] — (ELX|Y]Y? 
Var(X ) = EL[X:] — CE[X]Y? 
= E[ELX?|Y]] — CELELX |YJ]Y? 
= E[Var (XIY) + (ELXIY])?] — (EL[ELXIYJ])? 
— E[Var(X|Y)] + ELCELXIY DD?] — (ELELX|Y 1 
= ELVar(X|Y)] 十 Var (ELX|Y)) 
. PP{X<X,,min(X,,X,)=i) 
22. PIXI<X, minX,X,)=t} =C— P{min(X,,X,)=ty 
P{X=t,X,>t) 
~ P{X,=t,X,>t}+P{X,=t,X>t} 
P{X=t}P{X,>t 
~ P(X=t}P{(X,>t}+P{X,=t}P {XI>1) 
PiX,=t} =—A,(t)P{X,>t) 
PIX >t}=P{X=t}) /NG) 
A, (2) 
A (£) 


PIX,=t}P(X>t}= 


从 而 
PIX < X;,|imin(X),X,) -一 t} -一 


P{XI=t}P{X,>1} 


1 
A,(t) 
] 十 C2) 
4 (zt) 
A (#) 十 h(t) 
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6. 以 六 记 失 效 的 部 件数 ， 要 求 的 答案 是 ELN /Cn 十 px2)， 其 中 
。334。 


pe 


四 & 一 1 ta 、” 
ZL 一 AL[ | Gz) (十 所) 


k—] A 二 2 ™ 
+ | | hz) ( 冯 干 应 ? 
其 中 > 一 1 时 (| 一 0。 


7. 由 于 (Si ,S21S3) 一 《51352953) 等 价 于 CX1 ,XisX3) 二 (51 52 一 51953 一 52)， 故 
得 S1,S2,S;: 的 联合 密度 为 
f(s ,52 93S3) 一 Me *1 Ae™ S21? je 一 3 一 5 
= hae-z，0<< 5 < so < 5s 


8. (a) P {= <zl=P{log() < rr) 


一 已 UL/ < e*} 
= PIU; 之 e ~} 
一 一 ee 
(bb) 以 X; 记 泊 松 过 程 的 来 到 间隔 时 间 ， 则 N(1)〈 到 时 刻 1 的 事件 数 ) 将 
等 于 使 下 式 成 立 的 


zt 十 1 


yxX <1< DX. 
ff 一 1 


或 等 价 地 ， 使 下 式 成 立 的 


类 n 十 1 
一 DlogU, < < 一 >JlogU， 
i= 1 i 二 1 
或 等 价 地 


大 nn 十 1 
SlogU, >— 41> >)logU, 
1 +r 二 1 

或 


加 


十 1 
llv;ze*> [lv 
= zi 一 1 


由 于 NG1) 是 均值 为 1 的 泊 松 随机 变量 ， 结 论 得 证 。 
9. 以 N, 记 在 第 ; 层 乘 上 电梯 ,在 第 ; 层 离 去 的 人 数 ， 则 Nj 是 均值 为 *P; 的 
泊 松 变量 ， 昌 全 部 VN，(i 之 0，7> 划 相互 独立 .因此 ， 


Ca) E[0;|] = EL 2 No = 之 AP 


(b) 0; = 2 Ni 是 均值 为 2)%P; 的 泊 松 变量 
(Cc) 0; 与 Og 独立 
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10. (a) N; 是 服从 负 二 项 分 布 的 变量 . 即 


PN, =k} 一 (| Pr (一 PD 和 rr， kn 
(b) 否 
(c) T; 服从 参数 为 mm 和 P; 的 二 -分 布 
(d) 是 


co 


(e) ELT ] = |. PIT > ti}at 


=| P{T, S17 = 1 rddt 


0 


=| Pt 汪 ty)dt (由 独立 性 ) 


SS Pe fi* CP.r)™ ! 
= | (Uh or dz dat 


(f) r= Px 其 中 X; 是 第 ;一 1 次 与 第 ; 次 投掷 之 间 的 时 间 。 由 于 N 
与 已 ， 的 序列 独立 ， 我 们 得 到 
五 [了 j = ELELTIN], 
= EL[NE[X]] 
二 E[LN]」] (因为 E[X] = 1) 

17. 称 一 辆 进入 的 汽车 是 1- 型 的 ， 阁 它 在 时 刻 t 处 于 a 与 4 之 间 。 因 此 一 辆 在 
时 刻 s Gs<=2), 进入 的 汽车 是 1- 型 的 , 若 其 速度 Y 使 得 a 三 GG 一 VV 过 <6, 故 
它 为 1- 型 的 概率 为 

了 二 | 


因此 1- 型 汽车 的 个 数 是 泊 松 变量 ， 均 值 为 


让 人 (| -于 这 ja 
18. 以 与 定理 2. 3. 1 同样 的 方式 能 证 明 , 给 定 3, 一! 时 ，S,，…,，S，, 的 分 布 等 
辣 于 一 组 x 一 1 个 独立 的 (0,t)y 上 均匀 分 布 的 随机 变量 的 顺序 统计 量 的 分 
布 。 第 二 种 方法 较 直 观 些 是 
Sys sd = SS | 人 一 一 NG 一 天 
= SS Nt ) 一半 一 1 (由 独立 增 量 ) 
= Sy 1|NG)=n-— 1 


b 


f 5 


| j 一 
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28，(a) 它 不 可 能 有 独立 增 量 ,因为 知道 任 一 区 间 中 的 事件 数 将 改变 4 的 分 
… ,Sn 。 现 在 


布 。 
(b) 知 道 {N(s) ,0 和 ss 委 引 等 价 于 知道 N GO 及 来 到 时 刻 5)， 


《直观 地 论证 ) 对 0 二 sj 过 … 过 $s 过 i， 
P{A= A,NG) = nd] = s190° 0, = 35a} 
~ PIA= A}P{ING)=n|A=A}P(S) = 5, S.C s,|A=t,NG)=n} 
= GODem 于 (由 定理 2. 3. 1) 
从 而 
‘A 和 CA,A 十 da) IN GG) 一 nl S19°"* 9 一 Sn } 


_ ew* (WdGN) 
| CY AGA) 


因此 4 的 条 件 分 布 只 依赖 于 NG), 这 是 因为 给 定 入 (4) 的 值 ,不 管 
No 的 分 布 与 来 自 (0,t) 上 均匀 分 布 的 母体 


A 的 值 是 什么 ;O19 
的 顺序 统计 量 的 分 布 相同 。 
《c) Ptt 之 后 第 一 个 事件 的 时 刻 大 于 十 ;IN G4) 


| ee* CdG) 


[evo )"dG (A) 
站 


1 一 e- 1 一 e 到 
《d) lim | AaG (aA) | lim( -JdGA) 
一 | ac 
站 


(e) 同 分 布 但 不 独立 。 
29. (a) PIN()=n)=| 。 -CA ae-a Coa 
nl Cm—1)! 
rmtn—1)! 『 nl at at! 
Alm Ct) te " min 4 


-(™ (过 让 3 
n att & 十 t 
(b) P{A = ANG) =#) = OD BA = 

x CAE)” ge 


nl! 


mn 1l 


n 


. 


(aAY™!1 
(mm 一 ]1)1 


| 


_ — (Cacti) 4 [Ca 十 SL 
= (te Cm 二 nn 一 1)! 


(c) 由 习题 26(d), 答 案 是 条 件 分 布 的 均值 , 由 (b) 它 等 于 Cm 十 n)/(a 十 
1) 。 


第 三 章 
14.8g8=A+gxF 
= 有 hh 二 (RR 二 gxF)xFS=h+-hxFi+ex*F, 


二 hh 二 hxF+ (hexF)xF, 
=h+ hxF+hxrF,+exrF, 


= 有 二 hxF+hxF, 二 二 hxF, T+ gx PF, 
令 nm co 并 利用 已 ,一 0 得 


号 


g=h 二 hx > FF, =h+hxm 


二 1 


(a) PC ) 一 | P{ 在 时 刻 t 开 121 十 Y= s}dFs) 
- | Pa — DJdFG) 十 [Piz, > 412 + Y, = sydFs) 
一 | Pc — sdFG) 十 忆 D > +) 
(b) gd ) 一 | ELAG) |[X, = sJaF Gs) 
= | sc — dF(s) 十 | dr) 
= | ec _ dF(s) + FG) 
| Pz, > t}di Er21 


pF ~ EL[Z] + ELY] 
| Fa | dra 
0 了 


G) 一 一 一 一 = 
A + 


Cis Ce 2 
| | ididFs) _ | sdF(s) _ ELX*] 
A 24 2ELX | 


* 
20. ELRnw+1 ] 一 | ECR [Sww = sjF CG — sydm(s) 


(ec) P(t)— 
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+ EL[RnwrlSnw = 0JF() 


一 | ECR， [人 > — s)dm(s) 
站 
+ E[Ri|X, > 4]F 0) 


> | ECR 1X, > JF CO) dt/p 

一 | | ECR, |X) = sdF (s)adi/r 
性 上 

_- | [aeta, |X, = sJdF (0) /4 
OJ0 


= | sELR, 1X, = sJaF(s) /x 
= ELRIX /4 
其 中 Ap 一 天 -XI ]。 我 们 假设 了 ELAIX < ,这 殖 含 上 ce 时 
五 [R XI > FU)—>0 
由 于 Var(X)>0, EL[X?] 守 FE?[X], 除 非 X 以 概率 1 为 常数 。 
24. (a) 两 个 过 程 都 是 再 生 的 . 
(b) 车工 是 一 个 循环 的 时 间 , 入 是 受到 服务 的 顾客 数 , 则 


7 = EL| vG)as]J/EC7]， Wo = i " 


设想 在 任何 时 刻 每 个 人 以 等 于 其 剩余 服务 时 间 的 速率 支付 。 则 
一 个 循环 中 的 酬劳 = | V (sd 
又 以 Y; 记 第 i 个 顾客 的 服务 时 间 ， 


一 个 循环 中 的 酬劳 = 2 LDY; 十 | 《7 一 已 dt 


一 ] 0 

N N Y 
一 之 DY, 十 2 六 
因此 ， 


E[ 一 个 特 环 中 的 酬劳 ] 一 EL DY + EC》) 生 ] 


一 开 > DPI] 十 全 六 和 《由 瓦尔 德 等 式 ) 


现在 
AN 
2 
[之 | lim ELDY, 十 “"*" 十 D,Y, | 
ELN | i n 
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2 二 (由 于 万 , 与 独立 ) 


= ELY] lim 
一 E[Y]Wo 
所 以 从 上 得 到 


有 [一 个 循环 中 的 酬劳 ] = 天 [LN ]| ELYjWo 十 


令 此 式 与 E[| Vs)ds] = VE[T] 相等 并 利用 关系 式 E[T] 一 ELN]/2 
就 证 得 恒等式 。 

25. 设 P(X<Y}) 二 1. 例 如 ,P{X=1}) 二 1,Y 在 (2,3) 上 均匀 分 布 及 4 一 3。 

26. (a) 再 生 过 程 。 
(b》E 一 个 循环 中 i 个 包 囊 在 等 待 的 时 间 ]/pr ,其 中 


E[i 个 包 启 在 等 待 的 时 间 ] 一 | E[ 时 间 | 循 环 长 为 z]dF(z) 


EY” 


四 


一 | 之 /下 [时 间 | 长 为 z,NCzr) 一 门 e- 一 一 一 CPP(Z) 


_ ”eC 二 a 
= | 2 ji He rar lz) 
最 后 的 等 式 得 自 第 二 章 习 是 12 
27. lim| CX Cs))4s/e=E[ | -Xs ds]/ECT] 
=E[ jr(j)( 在 了 中 处 于 ; 的 时 间 )]/E[T] 
一 7 DP,; 
第 四 章 
10. 设 :一 ) i 是 正常 返 的 , 设 m 使 PF 二 0, 以 Ni 记 链 第 次 处 于 状态 i 的 时 
间 , 今 
1， 在 于 w tm 二 J 
0， 其 它 
由 强大 数 和 定律 


PL pro 


因此 
m 到 时 刻 入 +m 到 达 j 的 次 数 n pp 


其 中 7, 是 相继 到 达 状 态 ; 之 间 的 时 间 。 因 此 7 也 是 正常 返 的 。 若 ; 是 零 
常 返 的 ， 则 由 于 ;一 六 常 返 性 是 类 性 质 ,， 故 ) 是 常 返 的 。 若 7 是 正常 返 ， 
由 上 所 证 i 也 是 .因此 7 是 零 带 返 的 。 


HM. 设 ; 是 零 常 返 的 , 以 C 记 与 i 相通 的 状态 组 成 的 类 , C 中 全 部 状态 都 是 零 
常 返 的 ， 这 蕴含 了 对 一 切 JEC 


jimPo 一 0 


但 这 是 一 个 矛盾 ， 因为 于 =1，C 是 一 个 有 限 集 。 同 样 的 理由 ， 有 限 
链 的 状态 不 可 能 都 是 非常 返 的 ; 
13， (a) 令 状 态 为 他 身边 所 有 的 伞 数 。 转 移 概 率 为 
三 0 -一 1， 天 ;一 一 户 ， Pir-iri—=p， 一， 
(b) 极限 概率 的 方程 为 ~ 
NO— Axo Ap 
Tn; (Tp) Tanps 11, ,rl 
no—=A, 《1 一 户 ) 
容易 验证 它们 被 
1/(r+g), 若 i 二 1y*……,r 
所 满足 ， 其 中 gq=1 一 p 
《c) pro~ pq/ r+g) 
| 1 ， 者 六 ,二 J 
14 令 B=| | 
令 其 它 页 
=limEL DH/n 
=limE[ 2 2T li]/n 
=lim 之 ELL/n 
-im >) ELT 1 JPss/n 
=lim 5)P, DELE 1/n 
一 SPulimEL DN 11/n 
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一 riPs 


15. (la) 对 i 之 后 到 达 的 状态 取 条 件 。 
(b) P{Ti>n} = 2 P{Ti>n | 下 一 个 状态 是 站 Pi 


= DP{T,>n—1}P, 


10 
16. 这 马尔 可 夫 链 为 正常 返 的 当 且 仅 当 方程 组 
Vo Yl 


Yi yng yip;1, I 之 1 


有 一 组 解 yj 之 90， 这 ,yj 一 1。 这 些 方程 可 重 写 为 


Yo Yd1 


Jiji+19iH1 YI PI Yj; Yi1Pi1? 7 之 1 


由 此 可 得 
Vit YPj;" 7 之 0 
因此 ， Yit1™ Yo po; * J 之 0 
dd1"""0j+1 
所 以 ， 随 机 游 动 为 正常 返 的 充 要 条 件 是 
SS pop; oo 
pr 


20. 由 于 PIXi 一 Yi 一 1) 二 Pi(1 一 Pi) ,P(X; 一 了 == 一 1)= 二 (1 一 Pi)P;, 如果 我 
们 仅 在 XX; 一 Yi 了 关 0 时 观察 (X;,Y;) ,那么 观察 到 的 就 是 一 个 简单 随机 游 
动 ,其 
_ Pi(1—P,) 
Pi(1—P;,)+P,(1—P) 
因此 ,由 赌 徒 输 光 问题 的 结果 ， 


P!{ 错 误 } 二 P{ 在 上 升 M 之 前 下 降 MM) 
1 一 (~ (g/p))_ (gq/p)™ (一 (g/Pp)™ 


P 


一 ] 


1 一 (gq/p)** 1— (gq/p)* 
(jp 1 1 
l+ (gq/p)” (p/q) ”+1 1+ 
由 瓦尔 德 等 式 
MN 
E[ > CX;—Y)j=ELNJ(P—P;) 
1 一 1 
或 
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WY M _MWY—1) 
1 十 入 工 十 4 1 十 7 
27. 对 1，2，…， 的 任 一 置换 zi，…，i， 以 rz) 记 在 移 前 一 
位 规则 下 的 极限 概率 ,由 时 间 可 道 性 ， 对 一 切 置 换 我 们 有 
Cx Pi A si si si) = Pn pi sin) 
现在 所 要 取出 的 元 素 的 平均 位 置 可 表 为 
平均 位 置 一 ,PE[ 元 素 : 的 位 置 ] 


-P+ DP! 元 素 j 在 元 素 i 之 前 }] 

14D DEPP Ee 之前} 

于 可 ERP 在。 之前} 二 PPls 在 c 之 前 
-Ze 在 e; 之 前 } 十 P;(1 一 Pte) 在 e; 之 前 })] 
-1 DT- 一 P)Ptej 在 6 之 前 ) +2 7, 


因此 ， 为 使 所 要 取出 的 元 素 的 平均 位 置 最 小 ， 我 们 要 使 Ptej 在 ei 之前} 
在 己 ;> 己 时 尽 可 能 地 大 ,在 己 > 己 时 尽 可 能 地 小 ， 对 于 移 到 最 前 面 的 
规则 我 们 有 


ELN (Pi—P;)=M 


Ple; 在 ei 之 前 :于 
上 : 


因为 在 移 到 最 前 面 的 规则 之 下 ,元素 j 在 元 素 i 之 前 当 且 仅 当 最 后 一 次 
的 取出 z 或 7 的 要 求 是 要 取出 7。 所 以 为 了 证 明 移 前 一 位 规则 上 比 移 到 最 
前 面 的 规则 好 ， 只 要 证 明 在 移 前 一 位 规则 之 下 ， 当 了, 二 Pi 时 


PP. 
Plej 在 ei 之 前 } 一 二 
现在 考虑 任意 一 个 元 素 1 在 元 素 ; 之 前 的 状态 ,譬如 说 CG…， i, 说 ，…， 
zx，7J，…)。 利 用 (*) 逐次 移 位 ， 我 们 有 
AR iT ij) 二) 万 Xe iisttyty 
当 已 忆 时 上 式 列 含 了 
rs si ) Be rin i ) 


令 ali, 站 二 Plei 在 ej 之 前 }, 对 一 切 i 在 7 之 前 的 状态 求 和 , 利用 上 式 
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aG 力 < predj»i) 
由 于 az; 让 二 1 一 aCjy2) ,由 此 得 
ej >ETE 
31. (a) 是 。 
中) 处 于 状态 j 的 时 间 的 比例 一 %/ Pn, 0SjEN, 
lc) 把 到 达 ; 设想 为 更 新 ， 


x(N) 二 (ELY 链 在 相继 到 达 ; 之 间 的 转移 次 数 ]) 一 


x (CN) 一 LY 链 在 相继 到 达 1 之 间 到 达 j 的 次 ] 
ELY 链 在 相继 到 达 : 之 间 的 转移 次 数 ] 


一 5[X 链 在 相继 到 达 * 宅 间 到 达 / 的 次 数 . 
1/7x CN 


(d) 对 于 对 称 随 机 游 动 ， y 外 各 放生 家 是 
: Pi Pls 1=1,"*,N-—1 


从 而 由 (b) 
ELX 链 在 相继 到 达 i 之 间 花 在 7 上 的 时 间 j=1 
(e) 利用 定理 4.7. 1。 
第 五 章 
3. (a) 以 NGQ2) 记 到 :为 止 的 转移 次 数 .容易 证 明 这 时 
P(N >n} < De we 
从 而 已 {NGD)<<co} 一 1。 
5. 与 其 考虑 一 个 尤 尔 过 程 ， 其 和 (0) =:， 不 如 设想 有 : 个 独立 的 尤 尔 过 程 ， 
其 X(0) 二 1。 对 这 i 个 群体 的 每 一 个 在 t 时 的 总 量 取 条 件 可 见 ,& 个 出 生 的 


条 件 分 布 是 个 独立 随机 变量 的 分 布 , 其 中 每 个 变量 的 分 布 由 (5.3.2) 给 
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出 。 


8. 我 们 从 证 明 在 时 间 t 中 有 2 个 或 更 多 个 转移 的 概率 是 。() 开始 .对 下 一 个 
到 达 的 状态 取 条 件 给 出 


已 { 到 时 刻 上 有 三 2 个 转移 | 一) = 2PsP {T+ Tz) 


其 中 了 与 了 是 独立 的 参数 分 别 为 v; 与 w 的 指数 变量 ;它们 分 别 表示 离 
开 : 与 了 的 时 间 。( 注 意 到 了 , 与 7 是 离 i 后 到 达 的 状态 这 一 信息 是 独立 


的 .) 因此 ， 


limP 《到 时 刻 上 有 之 2 个 转移 |Xo 一 2At 
=lim 2PsP (Tt Tt)/ 
<lim[ SyPsP{Ti tT Et) /t+ PsyP{TSt) /4] 
mo jam i>M 


=lim| DPPITHT St 1— > P| 
全 KM j<M 


现在 
PITi—TjSEHSEPIT+HT Sti =PING)>2)=00) 


其 中 了 了 与 7' 是 独立 的 参数 为 v= 二 max(vwi,v)) 的 指数 变量 ,N (Go 是 参数 


为 的 泊 松 过 程 ， 而 ->0 时 
1 ee —vt 
1 


由 此 可 知 ， 对 一 切 M 
limP {到 时 刻 + 有 之 2 个 转移 |Xo=i) /tvi(1 一 > Py) 


令 M 一 吕 即 得 欲 要 的 结果 。 
现在 ， 
P(t)=P{(XG)=i|X(0)=7) 
二 P(XC)==i ,到 时 间 t 未 有 转移 |X(0)==7} 
十 PXQ) 二 i, 到 时 间 t 至 少 有 2 个 转移 |X(0)==2) 
=e "olt) 
类 似 地 对 i 关 ] 
Pi(t) 二 PP! 第 一 个 到 达 的 状态 是 ; ,转移 时 间 专 1|X(0)=7} 
十 P(XQ) 王 7, 第 一 个 到 达 的 状态 去 7|X(0)= 二 = 
因此 
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16. 


27. 


Pb 一 Po 一 e) 安 忆 (到 时 间 上 有 之 2 个 转移 |X(0) 一 站 一 oz) 
或 
Pi;;(t)=vPit to(t) 
以 gq” 及 P" 记过 程 {X(2)} 的 转移 率 及 平稳 分 布 ,类 似 地 ,对 过 程 (Y (2)} 记 
为 g”,P?, 对 链 和 (XG),Y()),t 之 0} 有 
Ge, = qi 
GD 97 
我 们 说 极限 概率 是 
Pi,;= PEPY 
为 验证 这 点 且 同 时 证 明 时 间 可 逆 性 ， 我 们 需要 做 的 就 是 验证 可 道 性 方 
程 .现在 
GD 二 3 
一 PPyo5， 《由 { 们 恰 )} 的 时 间 可 道 性 ) 
= Pe, jo, 
由 于 对 从 ,7 力 到 (人 ,7 ) 的 转移 的 验证 是 类 似 的 ， 故 结论 得 证 。 
(a) Pi/ DP; 
jEB 
(b) PIXCQ)=il XQ)EB,XG EG} 
PIX()=i,X( )EG)} 
PIX()EB,X(G  )EG)} 
PIXGT = P(X =ilX( )=)) 
一 < 
PIXGT) = P(X E BIXG-)=)) 


JEC 


一 JPax/ >， 人 > 已 


jEG jEG kEB 
(ce) 以 工 记 离开 状态 i 的 时 间 , 7” 记 离开 ; 之 后 直到 进入 G 的 附加 时 
间 。 利 用 了 TT 与 T” 的 独立 性 ， 对 i 之 后 到 达 的 状态 取 条 件 即 得 
F.(s) =Ele-:T+T)] 
—Ele “|]E[e-T | 


有 2 Ele” | 下 一 个 状态 为 jjP; 
1 


现在 


Tr 1 ， 若 JEGCG 
E [e ”| 下 一 个 状态 为 四 -| 
3) ， 若 JEB 
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这 就 证 得 (c)。 
(d) 在 任意 的 时 间 : 之 中 ,从 C 到 B 的 转 称 数 与 从 B 到 GG 的 转移 数 相差 
不 超过 1。 因 此 长 时 间 之 后 从 G 到 B 的 转移 率 ((d) 的 左边 ) 必 须 等 于 
从 BB 到 如 的 转移 率 ((d) 的 右边 )。 
(e) 由 (Cc) 得 
(s+v) FCs) -uF Gs) gi 人 Lo 
乘 以 已 并 对 一 切 iE B 相 加 得 
之 (stv Fs)= > > PF, ast 2 2 Pe 


i€B jEB 
= 2)F, Po 研习 ra 
三 吾 EC /后 
一 人 /六 Cs)[v,P,;— Pslt 2 Pa 
jEB rEG jEB 
其 中 最 后 的 等 式 得 自 
vi /一 之 / 忆 :957， 


而 最 后 第 二 个 等 式 得 自 (d)。 由 此 可见 


:> PF,(s)= >, > Pgs(1—F,(s)) 
tfEB 


EEC JEB 


2 F (5) 2 Pas 
({) 五 [e 一 天 < 一 下 一 《由 (b)) 


2 2 Pan 


jE€EG REB 
(g) 由 (2 ,利用 (e) 即 得 
OP =| 2 >,Pgs) 1—Ete-™]) 
iEG jEB 
除 以 *， 再 令 ,0 得 


之 /已 = 2 PgsE [7,] 
i€B 


iEG jEB 
DJ PE, (3) 
(h) E [ezj] = SS (由 (a)) 
jEB 
2 Pg (1—F,Cs)) 
sp 《由 (e)) 
jE€EB 
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> > Pig; (1 —E[Le *]) 


iEG jEB (由 (f)) 


s > ,已 ， 


1€B 


1 一 五 fle 
ETT 《由 (8)) 


G) 车 P{T: 志 1} 如 所 给 定 的 ， 则 
Ele zr|= | Pt > t}adt/E[LT., | 


= | es| dFr, Cy de/ECT, 


= | | didFr. (y)/ELT,] 
_ 1 Ble-™] 
ssE[T,] 
因此 ,由 (4) 可 知 假定 的 分 布 产生 正确 的 拉 普 拉 斯 变换 ,由 变换 与 分 
布 间 的 一 一 对 应 ， 结 论 得 证 。 
G) ELT,]=| taFr,G) 


=| | dF; Cd/ ECT 
0 如 


=| | diaFr, Cy)/ELT,] 


= ELT?]/2ELT.,] 
由 于 Var(T，) 守 0，E[T?] 衬 (CE[T,]》 
28.、 (RC(),t 之 0} 是 一 个 两 状态 的 马尔 可 夫 链 , 它 以 指数 率 A.q (4zp) 离 开 状 态 
1C(2) 进 入 状态 2(1)。 由 于 P{R(CO0)=1})= 二 p, 从 例 5.8(a) (或 5. 4Ca)) 得 出 
P{IRG) = 1} = pe *++ (1 — ee-*)Ap/A 
其 中 4 一 Ag 十 hp. 因 此 
x) PIRO = Dd = eo) + 


为 了 证 明 (b), 今 A() = ARC ， 日 对 e>0 写 


ife 


NG) = > LINGe) 一 NCOo 一 1)e)] 十 ofe) 
开 一 】 


现在 
EL[LNG(ne) — NG ~— 1)elAC(tn — 1)e)] = A((n 一 1)e)ge 十 ofe) 
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因此 
E[N(ne) 一 No 一 1)e)] = eELA((n 一 1)s)j ole) 


由 此 可 得 


fiE 
五 [ NG) | = E| > ea 17)ey 十 oe? | 


n=1 
现在 令 e>0 得 
E[NG)] = E[| 4G)as] 
站 


= > | P{RG) = i}ds 
_ PI 一 各 ) 
一 本 
这 里 最 后 的 等 式 得 自 (* )。Cb) 的 另 一 种 论证 (多 少 更 直观 些 ) 如 下 : 
Pl 在 (s,s 十 h) 中 有 更 新 ) 二 hELACs)j] 十 o(h) 


(1 — ee *)++ et 


所 以 ， 
E[A(s)] = Plls,s 十 h) 中 有 更 新 }/h 十 oCh)/h 
令 h 一 0 给 出 
ELACs)] = m’ (s) 
所 以 ， 
m(t) 一 | ELAC) ds 
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3. 由 (6. 1. 4) 得 出 ,从 某 个 给 定 的 时 间 开 始 , 在 布朗 运动 的 值 经 时 间 总 一块 改 
变 8 一 4 的 条 件 下 ,过 程 经 时 间 :一 所 所 改变 的 值 的 条 件 分 布 是 正 态 的 ,其 
均值 为 (8 一 A)(Gs 一 41)/ (一 二 ) 方 姜 为 人 一 与) 一 /一直 ) ,1 之 5s 之 ty。 
因此 ,给 定 关 (1) 二 4,XGs) 二 B,X(s) 是 正 态 的 ,其 均值 与 方差 为 


EL[XC()I XG) = A, XG) = B=A+(B— A) 一 一 人 


2 一 tl 
Var(X(s)|X() = A, X(t,) = B) 一 (5s — 一 3) 
2 “1 
4. 对 < 上 ， 
3 
3 十 ij 
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Cov KX) =G+De+Dcorz[ | ,2 


由 于 {2(》) 与 {WtW 0)} 同 分 布 ,其 中 WC) 是 布 归 运动 ,可 内 
Cov(X(3),X()) 一 (Cs 十 1)0 十 D| Cov( Ww [= To 一 一 |， W| 二 | 
wl | 


一 Cov| WO), w| | 一 一 iCov[W ‘WD | 
十 cw wa)] 
= s(t 1)— sit— st st 
一 -8 (st) 
由 于 易 见 { 久 ()} 是 正 态 过 程 ,E[XQ)j 二 0, 故 得 它 是 布朗 运动 。 
6. 1 二 4， c=M1/24 
7. 三 个 全 有 相同 的 密度 。 
14. 1/6 
“Ae 一 2 
1S， f(z)=4 Ee 
16. (Cb) EFT KB) ERT TP x Tol(h) 
一 让 十 二 一 + (P》 (因为 ELTy]= 训 ) 
VarCT, IX0) ) = Var(h + T, x) -+ vo(h) 
= g(r — XC(h)) + olh) 
因此 由 条 件 方差 公式 
g(x)=Var(ELT, | XR) D+ ELVar(T,|X(h))] 
= 六 Elg(r—X(h))Ito(h) 
= 和 +E[g(z)— XO)g' Gr) te g(r) + .J +oth) 


_ 
tgCr) phg! (2) (zz) 十 O( 产 ) 
2 
除 以 A, 邻 hh 一 0 即 得 
0 一 一 HB (7) g(r)/2 + 1/pe 
(ce) VartT rity)—= Var(T,+ Ty 1T,) 
= Var(T,) Var(T,,,y—T.) (由 独立 性 》 
= Var(7,)+ Var(T,) 
所 以 
Eg(XT+ Y= g(r) + gl(y) 
这 蕴含 
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g(rT) = ex 


(d) 由 Cc) 可 见 


BEC) 一 er 
由 (b) 这 歼 含 
gT) 一 rz/ 
17.min(l ,5x/4) 
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4. 0<Var( DIX) =nVar (XD) +n(n— 1)Cov(X1,X,) 
1 一 工 


。。 对 一 切 ns Var(X])+ (n— 1)Cov (xX, 入) 之 0 一 Cov(X， 有 2) -2 人 0 
作为 有 限 情 形 的 反例 , 令 XX 为 零 均 值 正 态 变 量 ,X, 一 一 X,。 


S. VarZ, 一 Var Dx,) 
i=1 


= DVar(X,)+ 5 Cov (Xi,X,) 
f=1 i 
但 对 i<=j， 
Cov CX;, X)) = ELX,X,] 
=E[L (Zi—2;.1) (2;—2,1)] 
=—=ELEL(Z:—2;1) (2;—Z; 1) |Z,,.…,2,]] 
=EL(Z— Zi 1) (ELZ;|21 ,2 — ELZ, 1Z ;27)] 
=E[L(Z;— 2,1) (2,— 2,)] 
=0 
8. EL,S21S?,..,,S2_,] 
=ELCS, 1+X,)|S?,.. ,62 ,] 
=ELS#_1|S?,. ,S21]+2ELX,S,,|S?,... ,3S2 1 ] 
+ ELX2|S?,...,S2_ |] 
=S7-1+2E[X, JELS,_ 1 |S?,... ,3S* 1] 十 E[X2] 
S52_ 1 二 go? 
因此 ， 
E[S? 一 ng 931 ,S21]= Sn 1)0o? 
13. 利用 f(x) =e“ 是 凸 函 数 的 事实 ,然后 由 延 森 不 等 式 
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1 一 Ef[e*] 之 eI 
由 于 EL[XX]< 之 0, 上 式 蕴含 9 汪 0，。 
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8. 〈a) 利用 表示 式 


不 一 Sx, 
其 中 X1,-… ,XX, 相互 独立 , 且 
P{X,;,= 1}= 1— PIX,= 0}= pp, 1 一 1,.,n 
由 于 X; 是 离散 IFR, 由 有 关 卷 积 的 结果 ,X 也 是 。 
(bb) 设 X。 是 参数 为 nz。 的 二 项 分 布 变量 ,其 中 np, 二 4。 由 IFR 性 在 极限 
下 保持 不 变 ,而 XX, 收敛 于 均值 为 4 的 泊 松 随机 变量 ,结论 得 证 。 
(c) 设 蕊 ， 委 1 ,为 独立 的 几何 分 布 随机 变量 , 印 


PIX;=k}= p(l— pp ,kk 之 1 
由 于 


P{X, = k|X, 之 上 } 一 p 
故 得 X; 是 离散 玫 R,i 之 1. 因 此 和,X; 是 IFR, 故 得 结论 。 
12. 以 位 记 马 尔 可 夫 链 中 从 i 到达 的 下 一 个 状态 . 题 设 给 出 TTiri,i 之 1。 
因此 由 这 Psf(s) 一 ELf(Ti)] 得 (a) .为 证 (b) 对 n 用 归纳 法 如 下 : 以 P., 
PiX, 宇 上 } 一 ELP.{X, 守 &|X}] 
= E[Px, (X,1 > &}] 


归纳 法 假设 说 Pi{X,_1 之 4} 关 于 i 递增 ,因此 Px,{(X,-1! 之 8) 是 X! 的 递增 藻 
数 。 由 (a) ,Xi 关于 初始 状态 : 随机 递增 ,所 以 对 任 一 递增 函数 g(X1), 特 别 
对 g (CD 一 Px {X。-1 之 &} ,我 们 有 
ELg(X)]4z 
17. 假设 Y 与 Z 独立 ,了 一 C,min(Y,Z) 一 下 。 利 用 两 个 独立 随机 变量 的 最 小 值 
的 失效 率 函 数 等 于 它们 的 失效 率 函 数 之 和 ,给 出 
MG) = 0) REA) h(t) = Mp (1) 


为 证 另 一 方向 的 结论 , 设 术 (4) 宇 (4). 设 Y 有 分 布 , 定 义 Z 与 Y 独立， 
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且 有 失效 率 函 数 
Az (1) = Ar(t) 一 AM) 


随机 变量 Y,Z 满足 所 要 求 的 条 件 。 
26. 令 2 一 2, 则 


2 一 -一 
P(X + X, 之 2 一 PP 去 | | = 已 (Bin(2 ,万 ) 之 2) 


Sp(x, 十 X 衬 i} = PiP;, 十 Pi 十 P,— PP, = PJP {Bin(2,7) >i 
“这 证 明了 天 十 XX, 夺 Bin (2,p) 
现在 考虑 1 的 情形 , 且 设 P 志 Ps 过 … 达 Ps。 设 f 为 递增 瑟 函 数 ,用 4 一 2 
时 的 结论 可 见 
E|f( > 1 Xa [SE| FA 和 + ,+ Sx, Xa, ,1 | 
其 中 ,,, 叉 , 与 别 的 变量 都 独立 , 且 是 贝 努 里 随机 变量 ， 
P(X =1) = PR, =1) = 
在 上 面 的 不 等 式 中 取 期 望 证 得 
DX < ++ Sx 
重复 这 段 论证 (从 而 连续 地 证 明了 ,现在 的 庄 X 的 和 比 把 P 最 大 的 X 
与 P 最 小 的 X 换 成 两 个 有 它们 的 了 的 平均 值 的 XX 后 的 和 较 少 变 ) 并 取 
极限 得 


2 X; <BinGn,p) 
;一 1 " 


”现在 写 


其 中 X; 夺 0,n 十 1 所 1 所 4 十 m。 由 已 证 结论 


a sp 
和 2X: SBin (n+ m, > | 


令 m 习 co 得 
2 XSPoisson( 2P:) (参数 为 DP， 的 泊 松 变量 ) 
注 :我 们 假定 变动 性 对 取 极 限 仍然 保持 。 
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29. 设 矿 为 凸 函 数 。FGcX) 关 于 和 的 泰 勤 级 数 展 开 给 出 
FecX) = FX FX em DX+ fCK 一 Z)272 
其 中 X<Z<cX。 取 期 望 并 利用 上 地 的 凸 性 给 出 
ELf (eX)] > EL[f(XYJ + Ce — 1DELXf' (X)] 
现在 对 XX 之 0, 函 数 g(X) 一 关 与 g(X)== 了 '(X) 关 于 X 都 递增 (后 者 由 
于 了 的 凸 性 ), 所 以 由 第 七 章 的 命题 7. 1. 5 
E[Xf' (X) |] 之 EL[XJE[f'’ (X)]=0 
这 就 证 明了 EFf(cX)] 宇 E[f(X)]。 


* 354。 


名 词 索 引 


A 

Absorbing state 吸收 状态 164 
Age-dependent branching process 年 龄 相依 分 支 过 程 82 
Age of renewal process 更 新 过 程 的 年 龄 7? 
Alternative renewal process 交错 更 新 过 程 75 
Aperiodic state 非 周期 状态 119 

Arc sine law 反正 苞 律 101，222 
Auto regressive process 自 回 归 过 程 255 

B 

Backward diffusion equation 回 后 扩散 过 程 23? 
Balance equation 平衡 方程 177 

Ballot problem 选票 问题 18 

Bayesian statistical inference 山 叶 斯 统计 推断 328 
Bernoulli 贝 努 里 136 

Beta random variable 贝塔 随机 变量 13 
Binomial random varialbe 二 项 随机 变量 13 
Birth and death Process 生 灭 过 程 165 

Birth rates 生长 率 165 
Blackwell’ s theorem 布莱克 威 尔 定理 72，279，304 
Boole’ s inequality 布尔 不 等 式 2 
Borel-Cantelli lemma 波 芋 尔 一 坎 泰 利 引 理 3 
Branching process 分 支 过 程 132 
Brownian bridge 布朗 桥 216 

Brownian motion 布朗 运动 214 
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Brownian motion with drift 
世 


Busy period of queue 
Cauchy-Schwarz inequality 
Central limit theorem 
Central limit theorem for renewal 
process 
Chapman-Kolmogorov equations 
Characteristic function 
Class of Markov chain 
Communication 
Compound Poisson process 
Conditional density 
Conditional distribution 
of arrival times of Poisson pro- 
Cess 
Conditional expectation 
Conditional mass function 
Conditional Poisson process 
Conditional variance formula 
Continuous time Markov chain 
Convex function 
Convolution 
Counting process 
Coupling 
Covariance 


Covariance stationary process 
D 


Death rates 
Decreasing failure rate 
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有 漂移 的 布朗 运动 ”228 


排队 的 忙 期 46 
柯 西 一 许 瓦 效 不 等 式 ”252，295 
中 心 极限 定理 ”28 


更 新 过 程 的 中 心 极限 定理 70 
切 普 曼 一 柯 尔 英 哥 洛 夫 方 程 118 
特征 函数 14 
马尔 可 夫 链 的 类 120 
相通 ”120 
合 泊 松 过 程 54 
条 件 密度 15 
条 件 分 布 15 


泊 松 过 程 来 到 时 刻 的 一 15 
条 件 期 望 15 

条 件 质量 消 数 14 

条 件 泊 松 过 程 55 

条 件 方差 公式 ”32 
连续 时 间 马 尔 可 夫 链 163 
上 四 郴 数 282，315 

卷 积 18 

计数 过 程 34 

耦合 297 

协 方差 8 

协 方差 平稳 过 程 249 


死亡 率 165 
递减 失效 率 293 


Decreasing failure rate renewal 
process 

Decreasing likelihood ratio 

De Finetti’ 


Delaved renewal process 


s theorem 


Directly Reimann integrable func- 
tion 

Distribution function 

Doob 

Doubly stochastic Markov chain 


Duality principle of random walks 
E 


Eeinstein 

Elementary renewal theorem 
Empirital distribution function 
Empidemic model 

Equilibrium distribution 
Equilibrium renewal process 
Ergodic Markov chain 

Erlang loss model 

Euclid 

Event 

Excess life 

Exchangeable random variable 
Exit time 

Expected value 


Exponential distribution 
F 


Failure rate function 


Feller 


递减 失效 率 更 新 过 程 306 
递减 似 然 比 314 

德 ` 费 奈 带 定理 264 
延迟 更 新 过 程 84 


直接 黎 曼 可 积 函 数 73 
分 布 函 数 6 

杜 勃 ”289 

双 随 机 马尔 可 夫 链 ”155 
随机 洲 动 的 对 偶 原 理 257 


爱 因 斯 坦 214 
基本 更 新 定理 69 
经 验 分 布 郴 数 218 
传染 模型 ”169 
平移 分布 87 
平衡 更 新 过 程 87 
遍历 马尔 可 夫 链 
爱 尔 朗 消失 模型 
欧 几 里 得 ”60 
事件 1 

过 剩 77 

可 交换 随机 变量 
退出 时 210 
期 望 值 ?7 
指数 分 布 


126 
195 


107 


13,，25 


失效 率 晴 数 ”27 
费 勒 ”33 
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Forward diffusion equation 
《> 


G/G/1 queue 

G/M/] queue 

Gambler’ s ruin 

Gambling 

Gamma distribution 
Gausslan process 

(eneral renewal process 
{Geometric Brownian motion 
Geometric random variable 


Glivenko-Cantelli theorem 
H 


Hazard rate function 


Helly 
1 


Increasing failure rate 
Increasing likelihood ratio 
lIndependent increments 
Independent random variables 
Infinite server Poisson gueue 
output process 
Inspection paradox 
Instantaneous state 
Integrated Brownian motion 
Inventory 


lrreducible Markov chain 
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向 前 扩散 方程 236 


G/G/1 排 队 系 统 262 
G/M/1 排 队 系 统 116 
赌 徒 输 光 ”132 

赌博 268，284 

伽 玛 分 布 13 

高 斯 过 程 216 

一 般 更 新 过 程 84 

几何 布朗 运动 ”224 

几何 随机 变量 13 

格 利 汶 科 一 坎 泰 利 定 理 218 


风险 率 肾 数 27 
赫 利 265 


递增 失效 率 293 
递增 以 然 比 314 
独立 增 量 34 

独立 随机 变量 7 


大 窟 多 个 服务 员 的 浊 松 排队 系统 43 


一 的 输出 过 程 53 
检查 悖 论 78 


瞬时 状态 164 

积分 布朗 运动 ”225 
存储 79 

不 可 约 马 尔 可 夫 链 ”119 


J 


Jensen’ s linequality 


Jomt distribyutions 
KK 


Key renewal theorem 
Kolmogorov’' s backward equations 
Kolmogorov’ s forward equations 


Kolmogorov’' s inequality 


Kolmogorov’' s inequality for sub- 


martingales 


Korolyook’ s theorem 
L 


Ladder variable 

Laplace transform 

Lattice random variable 

Law of unconscious statistician 
Lebesgue 

L’ hopital 

Likelihood ratio ordering 
Linear growth 


List ordering problem 
MI 


M/G/1 queue 

M/G/!] shared processor model 
M/M/]1 queue 

M/M/s queue 

M/M /co queue 


Markov chain 


延 森 不 等 式 282，330 
联合 分 布 6 


关键 更 新 定理 73 

柯 尔 莫 名 洛 夫 向 后 方程 170 
柯 尔 莫 哥 洛 夫 向 前 方程 172 
柯 尔 莫 哥 洛 夫 不 等 式 288 


下 款 的 柯 尔 英 哥 洛 夫 不 等 式 ”283 
柯 罗 留 克 定 理 105 


阶梯 变量 279 

拉 普 拉 斯 变换 14 
格子 点 随机 变量 71 

不 且 党 的 统计 学 家 的 法 则 8 
勒 贝 格 68 

洛 必 达 104 

似 然 比 序 309 

线性 增长 ”166 


名 册 排 序 问题 140 


M/G/1 排 队 系 统 46 
M/G/1 共 用 加 工 模型 
M/M/1 排 队 系 统 178 
M/M/s 排队 系统 165 
M/M/co 排 队 系 统 209 
马尔 可 夫 链 ”114 


198 
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Markovian property 马尔 可 夫 性 114 


Markov inequality 马尔 可 夫 不 等 式 282 
Markov process 马尔 可 夫 过 程 215 
Martingale 著 265 
Matringale convergence theorem 靶 收 伍 定 理 283 
Matching problem 匹配 问题 8 
Memoryless property 无 记忆 性 ”25 
Mixtures 混合 294 
Moment generating function 矩 母 请 数 12 
Monotone likelihood ratio 单调 似 然 比 311 
Moving aveTage process 动 平均 过 程 250 
Multinomial distribution 多 项 分 布 30 
N 
Negative binomial distribution 负 二 项 分 布 13 
New better than used In expecta- 

tion (NBUE) 新 的 平均 比 用 过 的 好 ”317 
New worse than used in expecta- 

tion (NWUE) 新 的 平均 比 用 过 的 差 318 
Neyman-Pearson lemma 奈 曼 一 皮尔 逊 引 理 310 
Nonhomogeneous Poisson process ” 非 齐 次 泊 松 过 程 51 
Normal distribution 正 态 分 布 13 
Null reccurent 零 情 返 123 
OO 
Occupation time 占有 时 间 204 
Ornstein-Uhlenbeck process 奥 恩 斯 坦 一 乌 伦 佩 克 过 程 252 
P 
Packing problem 装填 问题 21 
Patterns 花样 85 
Period 周期 119 
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Poisson approximation to binomial 
Peisson process 

Poissom random variable 

Polya frequence density 

Positive reccurent 


Pure birth process 
R 


Random experiment 
Random time 

Random variable 
Random walk 

Range 

Rate 

Record and record values 
Reccurent state 
Kegenerative process 
Regular chain 

Regular stationary point process 
Reliability 

Renewal equation 
Renewal function 
Renewal process 
Renewal reward process 
Renewal type equation 
Residual life 

Reversed chain 

Ruin problems 


Runs 
SS 


Sample path 


二 项 分 布 的 泊 松 表 近 ”30 
泊 松 过 程 35 

泊 松 随机 变量 13 

波 里 亚 频 率 密度 314 


正常 返 123 
纯 生 过 程 166 
随机 试验 1 
随机 时 间 266 
随机 变量 5 
随机 游 动 257 
变 程 258 

速率 66 
纪录 与 纪录 值 53 
常 返 状态 120 
再 生 过 程 96 
规则 链 ”165 
正则 平稳 点 过 程 105 
可 靠 性 23，86 
更 新 方程 107 
更 新 函数 64 

更 新 过 程 62 

更 新 酬劳 过 程 89 
更 新 型 方程 ”109 
剩余 寿命 77 
逆向 链 ”144 
破产 问题 245 
游程 137 

样本 路 径 29 
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Sample space 

Schechner 

Scheduling problems 
Second order stationary 
Semi-Markov process 
Shot noise process 

Simple random walk 
Sojourn time 

Standard Brownian motion 


Standard time 


Statioary distribution of Markov 


chain 
Statioary increments 
Statioary polnt process 
Statioary process 
Statistical inference 
Steady state 
Stirling’ s approximation 
Stochastically larger variable 
Stochastically more variable 
Stochastic population model 
Stochastic process 
Stopping time 
Strong law of large number 
Submartingale 
Supermartingale 


Symmetric random walk 


T 


Tandem queue 


Taylor 


Time reversible Markov chain 
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样本 空间 1 


雪 和 希 纳 160 
排序 问题 312 
二 阶 平稳 ”249 


半 马 尔 可 大 过 程 148 
发 射 噪声 过 程 ”246 
简单 随机 游 动 117 
逗留 时 间 210 
标准 布朗 运动 ”215 
标准 时 210 


马尔 可 夫 链 的 平稳 分 布 
平稳 增 量 34 
平稳 点 过 程 103 
平稳 过 程 249 

统计 推断 310 

稳 态 179 
斯 特 林 近似 ”122 
随机 更 大 的 变量 292 
随机 更 多 变 的 变量 314 
随机 群体 模型 ”184 
随机 过 程 29 

停 时 266 
强大 数 定律 ”28 

下 对 281 

上 蒜 281 

对 称 随机 游 动 ”97 


串联 排队 ”182 
泰勒 ”229 
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时 间 可 北 马 尔 可 夫 链 ”144 


Transient state 
Transition rates 
Truncated chain 
Truncated normal distribution 


Two-dimensional Poisson process 
UU 


Uncorrelated random variables 
Uniformization 


Uniform random variable 
VY 


Variability ordering 


Warlance 
VY 


Wait In queue 
Wald’ s equation 
Weibull distribution 
Wiener 
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Yule process 


清 过 状态 120 
转移 速率 164 
截 尾 链 ”158，182 
截 尾 正 态 分 布 329 
两 维 泊 松 过 程 60 


不 相关 随机 变量 8 
一 致 化 ”203 
均匀 随机 变量 13 


变动 性 序 315 
方差 8 


排队 系统 中 的 等 待 112 
瓦尔 德 等 式 67，108，268 
威 布尔 分 布 329 

维 纳 ”215 
排队 系统 中 的 工作 量 112 
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